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序言 


大 数据 正在 席卷 全 球 。 这 个 话题 如 今 频繁 见 诸 各 种 会 议 、 专 著 、 论 
文 和 企业 的 讨论 中 。 这 当然 是 事 出 有 因 的 : 对 以 往 深 不 可 测 的 大 量 数 据 
进行 挖掘 ， 从 而 发 现 趋势 其 至 预测 未 来 ， 这 样 的 想法 的 确 非常 具有 吸引 
力 。 但 古 正 如 这 些 会 议 、 专 著 、 论 文 和 商业 计划 中 所 阐述 的 ， 弄 明白 如 
何 处 理 巨大 体 量 的 数据 ， 并 使 其 发 挥 更 好 的 作用 并 不 是 一 件 简 单 的 事 


情 。 


我 们 将 大 数据 定义 为 人 或 物 与 数字 网 络 世界 之 间 相 互 作用 而 产生 的 
言 恩 集合 。 它 可 以 是 数 年 间 采 集 的 关于 一 个 人 的 单一 变量 的 数据 ， 也 可 
以 是 在 某 一 瞬间 采集 的 关于 数 亿 人 的 多 变量 数据 。 大 数据 可 能 涉及 的 时 
间 长 、 训 括 的 主题 多 或 者 涵盖 的 范畴 广 ， 也 可 能 是 这 三 种 特征 间 的 组 


ay 
Ho 


由 于 各 种 技术 因素 的 汇集 ， 大 数据 已 经 成 为 我 们 现代 世界 的 一 个 特 
征 。 高 性 能 的 移动 互联 智能 设备 就 在 你 的 口袋 中 采集 数据 、 进 行 运算 ， 
然后 发 送 给 远程 服务 器 。 云 计算 和 日 益 增 长 的 高 密度 数据 存储 设备 ， 为 
一 切 信 息 提 供 了 安 映 之 上 所。 并且 ， 流 处 理 范 式 使 数据 可 以 通过 分 布 式 设 
备 进 行 处 理 。 一 些 针 对 大 规模 数据 集 设计 的 编程 模型 ， 如 MapReduce 以 
及 开源 的 Hadhoop 的 出 现 ， 使 人 们 了 解 即 将 到 来 的 信息 流 是 可 能 的 。 


大 数据 被 定义 为 我 们 日 章 活 动产 出 的 数字 记录 或 留 下 的 数字 足迹 ， 
它 是 我 们 生活 的 元 数据 。 一 些 人 害怕 这 会 带 来 一 个 没有 隐私 的 世界 企 
业 对 我 们 的 了 解 比 我 们 自己 还 多 ， 政 府 可 以 监控 那些 它们 认为 危险 的 
人 。 为 一 些 人 则 认为 大 数据 是 数据 库 这 抹 彩 虹 末 端的 一 饶 金 子 ， 是 抓 住 
下 一 波 信息 拉 术 趋势 的 机 遇 。 他 们 还 相信 ， 从 这 些 全 世界 人 们 日 第 生活 


中 产生 的 海量 数据 中 可 以 获得 有 益 的 东西 。 


作为 本 书 作 者 ， 我 们 是 技术 专家 ， 属 于 后 者 。 我 们 认为 ， 如 果 从 负 
责任 的 、 审 慎 的 以 及 对 环境 敏感 的 角度 来 看 ， 大 数据 可 以 帮助 改善 公共 
卫生 、 引 导 个 人 更 好 地 决策 、 促 进 知识 的 共 吾 以 及 提升 创新 速度 。 大 数 
据 的 时 代 已 经 来 临 ， 而 且 看 起 来 也 不 会 很 快 结束 。 因 此 ， 保 证 个 人 目 由 
和 隐私 不 被 侵犯 ,告知 消费 者 谁 在 什么 时 间 、 以 什么 为 目的 获得 了 他 们 
的 数据 就 很 重要 。 我 们 相信 ， 在 小 心 谨慎 进行 数据 采集 的 前 提 下 ， 大 数 
据 就 可 以 被 用 来 设计 成 更 好 的 系统 ， 以 及 一 个 可 能 的 更 好 的 世界 。 我 们 
采用 了 一 个 被 称 为 “现实 挖掘 ”(Reality Mining) 的 方式 ， 不 仅 对 大 数据 
进行 分 析 ， 而 且 确保 分 析 能 够 反映 参与 人 的 现实 状况 ， 同 时 在 整个 过 程 
中 始终 保持 谨慎 的 数据 采集 态度 。 


本 书 的 目标 是 探讨 大 数据 可 能 的 积极 方面 ， 特 别 是 展现 如 何 利用 对 
现实 的 挖掘 来 设计 更 好 的 社会 系统 。 这 意味 着 本 书 所 介绍 的 理念 ， 将 会 
超越 那些 简单 的 描述 性 分 析 ， 如 计 步 数据 的 柱状 图 等 。 我 们 所 探讨 的 是 
针对 一 些 可 视 化 的 数据 表达 ， 比 如 犯罪 行为 或 疾病 暴发 的 空间 分 布 图 
等 ， 如 何 将 其 转化 为 具有 实际 操作 意义 的 行动 或 政策 。 我 们 还 考 夸 了 可 
以 使 用 全 球 的 匿名 数据 系统 的 构想 。 提 出 诸如 “如 何在 缺乏 公共 卫生 资 
源 的 发 展 中 国家 ， 配 置 疾病 传染 的 预警 系统 ? "这样 的 问题 。 根 本 上 ， 
我 们 希望 探寻 如 何 利 用 大 数据 让 人 人 们 的 生活 变 得 更 加 美好 。 


本 书 分 为 5 个 部 分 ， 每 个 部 分 分 别 关 注 不 同 的 数据 采集 尺度 ， 大 数 
据 的 内 在 挑战 和 机 过 。 大 致 同 伍 尔 斯 : 伊 姆 斯 和 鞋 : 伊 姆 斯 夫妇 在 1977 年 
制作 的 电影 短片 《十 的 力量 》 中 分 别 观察 了 宇宙 的 极 大 部 分 和 极 小 部 分 
一 样 ， 本 书 对 大 数据 的 讨论 也 是 从 小 样本 渐 增 到 较 大 的 样本 。 


本 书 的 现实 挖 气 旅 程 将 从 个 体 层面 开始 ， 即 单个 人 所 产生 的 数据 和 
应 用 于 单个 人 的 数据 。 接 着 ， 我 们 升级 到 邻里 和 组 织 层面 ， 再 扩展 到 城 
市 层面 ， 之 后 是 国家 层面 ， 最 后 到 达 全 球 层 面 。 城 然 ， 这 样 的 分 层 框 架 
并 不 是 绝对 的 ， 也 无 法 宫 括 所 有 的 场景 类 型 。 当 然 ， 在 茶 一 层面 获取 的 


大 数据 也 可 以 应 用 于 其 他 不 同 层面 。 我 们 适时 地 提 及 了 一 些 这 类 多 样 化 
应 用 的 例子 。 不 过 ，5 个 层次 的 结构 更 易 把 握 ， 也 更 有 助 于 我 们 思考 在 
大 数据 获取 和 利用 过 程 中 面临 的 种 种 挑战 。 


这 5 个 部 分 又 分 别 各 有 两 章 。 每 个 部 分 的 第 一 章 详 细 描 述 了 该 层面 
的 数据 采集 种 类 、 数 据 采集 方式 ， 以 及 读者 在 可 能 的 情况 下 可 以 如 何 获 
得 这 些 数据 ， 第 二 半 则 阐释 在 这 些 数 据 的 基础 上 ， 已 经 建立 或 者 我 们 相 
信 可 以 建立 的 应 用 和 系统 。 


因此 ， 每 部 分 的 第 一 章 作 为 同 导 ， 硕 领 读 者 对 可 以 挖掘 的 多 种 数据 
类 型 以 及 可 能 的 获取 途径 进行 思考 。 这 些 途 径 可 能 是 编写 一 个 手机 应 用 
程序 来 采集 使 用 者 的 睡 虐 数据 ， 或 是 订阅 服务 丙 提 供 的 航班 数据 ， 又 或 
征 基于 谷歌 进行 检索 的 数据 分 析 。 有 些 多 数 人 不 太 容 易 获 取 的 数据 ， 比 
如 移动 电话 的 通话 记录 ， 我 们 也 提供 了 如 何 有 限 获 取 或 者 寻找 其 他 可 能 
来 蔡 代 实际 数据 的 建议 。 


在 充分 理解 哪些 数据 类 型 可 以 被 挖掘 之 后 ， 我 们 接着 讨论 可 以 使 用 
这 些 数据 进行 现实 挖掘 的 程序 。 有 些 系统 较为 成 熟 ， 一 些 则 还 处 于 早期 
阶段 ， 其 他 则 疝 未 被 开发 出 来 。 我 们 在 本 书 中 仅 提 供 了 一 小 部 分 可 用 程 
序 的 信息 ， 同 时 也 展现 了 机 遇 之 所 在 。 


隐私 问题 是 大 数据 采集 和 使 用 过 程 中 的 大 麻烦 ， 在 本 书写 作 过 程 
中 ， 我 们 曾 考 虑 用 单独 的 一 章 来 讨论 它 ， 但 最 终 放弃 了 这 个 想法 。 工 程 
师 和 企业 往往 在 最 初 的 产品 构想 已 经 基本 完成 时 ， 才 开始 考虑 用 户 或 客 
户 的 隐私 问题 。 这 样 的话 ， 隐 私 特性 便 成 为 几 近 完成 的 主要 设计 的 添 
头 。 我 们 不 希望 这 本 书 也 变 成 这 样 。 我 们 认为 ， 人 们 对 隐私 的 期 望 和 分 
译 数 据 的 意愿 度 应 该 从 一 开始 束 补 考虑 ， 并 烙 在 每 一 个 应 用 程序 或 产品 
设计 中 。 故 依据 需要 ， 我 们 通过 探讨 隐私 问题 、 人 们 对 数据 采集 和 共享 
方式 的 了 解 程度 、 人 们 对 这 些 方式 的 适应 度 〈 适 应 度 往 往 受 到 多 种 因素 
的 影响 而 不 断 变动 ) 以 及 在 注重 隐私 的 前 提 下 开发 应 用 来 反映 这 种 情 
绪 。 


需要 特别 指出 的 是 ， 本 书 没有 涉及 特定 的 分 析 方 法 论 ， 而 是 将 这 些 
留 给 了 其 他 文章 、 论 文 和 讨论 。 大 数据 技术 还 在 不 断 发 展 ， 现 实 挖 掘 的 
实践 者 们 很 快 会 发 现 将 有 更 多 分 析 技 术 可 用 于 他 们 的 数据 集 。 在 本 书 中 
我 们 没有 排斥 东 些 特定 的 数据 和 应 用 程序 的 分 析 ， 而 是 选择 聚焦 于 更 宽 
泛 的 现实 挖掘 问题 : 如 何 安全 、 不 侵犯 隐私 而 又 有 意义 地 进行 数据 采 
集 ? 如 何 设计 实用 、 以 人 为 本 的 系统 ? 


天 于 大 数据 的 很 多 讨论 都 围绕 挖掘 “知识 ”这 一 主题 ， 似 乎 “知识 ? 惑 
是 人 们 唯一 能 够 且 应 该 从 中 获得 的 。 本 书 从 另 一 个 视角 来 看 竺 大 数据 ， 
在 描述 性 分 析 的 基础 上 前 进 了 一 大 步 ， 从 知识 走 癌 行动 。“ 现 实 挖掘 ? 征 
为 了 使 用 大 数据 来 开发 系统 ， 从 而 对 从 个 体 到 全 球 的 所 有 层面 都 产生 积 
极 影响 ， 它 将 提升 我 们 的 生活 品质 ， 让 我 们 变 得 更 健康 ， 并 让 我 们 与 70 
亿 地 球 邻 居 们 一 起 生活 得 更 加 美好 、 重 能 和 幸福 。 


手机 一 旦 掌握 了 你 的 使 用 习惯 ， 它 就 可 以 帮助 你 安排 行程 、 提 供 
活动 建议 ， 或 者 在 没有 手动 设置 的 情况 下 发 出 提醒 。 它 可 以 调整 使 用 
模式 以 适应 多 样 的 环境 ， 比 如 在 影院 时 自动 关闭 手机 铃声 ， 电 影 结束 
后 再 自动 打开 。 熟 知 你 生活 习惯 的 手机 还 可 以 为 你 推荐 酒吧 ， 那 里 的 
常客 们 跟 你 有 着 相似 的 爱好 ， 或 者 刚好 在 你 想 要 尝试 去 一 家 新 餐厅 吃 
晚饭 时 问 你 推荐 一 个 正 合 你 意 的 餐饮 。 


REALITY 


MINING 
Using Big Data 


to engineer a Better World 


第 一 章 
智能 手机 、 传 感 器 和 生命 记录 


如 今 ， 采 集 我 们 上 自身 的 众多 日 常数 据 已 相当 容易 ， 各 种 各 样 的 技术 
通过 移动 电话 、 软 件 、 皮 肤 电 流 监控 器 、 可 穿戴 摄像 头等 ， 妃 踩 着 我 们 
的 习惯 、 人 位置、 消费 、 路 线 、 社 交 以 及 情绪 。 的 确 ， 因 我 们 日 冲 行 为 而 
产生 的 “数据 排放 ”， 其 释放 和 捕 换 的 便利 性 给 研究 人 员 们 之 来 了 新 的 机 
遇 。 不 仪 使 研究 者 可 以 更 深入 地 了 解 这 些 行为 ， 还 有 助 于 他 们 利用 这 些 
观察 来 设计 更 适应 人 们 实际 行为 的 系统 。 


传 感 费 、 软 件 以 及 它们 在 我 们 生活 中 的 三 泛 存在 是 推动 这 一 趋势 的 
重要 因素 ， 而 一 类 重要 的 传 感 句 就 植 入 在 如 今 的 移动 电话 中 。 随 着 移动 
电话 的 高 度 普 及 ， 扎 成 为 全 球 几 乎 所 有 人 的 必需 品 ， 它 已 经 当仁不让 地 


成 为 采集 个 体 数 据 的 最 基本 工具 。 到 2012 年 年 底 ， 全 球 已 有 近 60 亿 个 移 
动 电话 客户 端 。 即 使 是 最 简单 的 手机 ， 每 次 与 通信 基站 交换 信号 时 ， 也 
会 提供 其 使 用 者 的 位 置信 息 。 移 动 电话 最 初 只 是 通信 工具 ， 如 今 已 逐渐 
成 为 装配 了 多 种 附加 传感器 的 随 喘 计算 设备 。 这 些 附加 装置 包括 可 以 监 
测 映 体 活动 的 加 速 仪 、 可 以 测度 我 们 位 置 的 GPS (全球 定 位 系统 ) 必 

刻 、 蓝 牙 模 块 等 近 距 离 无 线 传输 协议 、 可 以 推 师 附近 情况 的 麦克 风 等 ， 
甚至 简单 的 通话 记录 也 可 以 用 来 衡量 我 们 的 社交 进展 。 


手机 一 旦 掌握 了 你 的 使 用 习惯 ， 它 就 可 以 帮助 你 安排 行程 、 提 供 活 
动 建议 ， 或 者 在 没有 手动 设置 的 情况 下 发 出 提醒 。 它 可 以 调整 使 用 模式 
以 适应 多 样 的 环境 ， 比 如 在 影院 时 目 动 关闭 手机 铃声 ， 电 影 结束 后 再 目 
动 打 开 。 熟 知 你 生活 习惯 的 手机 还 可 以 为 你 推荐 酒吧 ， 那 里 的 常客 们 跟 
你 有 着 相似 的 爱好 ， 或 者 刚好 在 你 想 要 尝试 去 一 家 新 餐厅 吃 晚 饭 时 向 你 
推荐 一 个 正 合 你 意 的 餐馆 。 


移动 电话 中 的 数据 还 能 够 提供 人 们 的 实时 位 置 移动 信息 ， 在 研究 外 
疾 或 流感 这 类 疾病 时 ， 它 可 能 成 为 建立 传染 路 径 模 型 的 关键 数据 。 力 
外 ， 研 究 人 员 还 发 现 ， 通 过 手机 上 合适 的 传 感 费 和 软件 捕 扣 用户 的 行为 
变化 和 谈话 模式 ， 可 以 比 其 他 医学 检查 更 早 发 现 茶 些 疾病 的 预兆 ， 如 抑 
郁 症 或 由 金森 综合 征 。 在 使 用 个 人 数据 让 人 们 的 生活 变 得 更 加 轻松 和 健 
康 方面 ， 现 实 挖掘 拥有 很 大 的 淤 力 ， 这 些 只 是 几 个 仍 处 于 早期 阶段 的 应 
用 案例 。 


追踪 我 们 个 人 信息 的 不 仅仅 是 移动 电话 ， 我 们 的 个 人 计算 机 使 用 记 
录 也 在 被 越 来 越 多 的 软件 监测 。 研 究 人 员 推 测 ， 人 们 越 了 解 自己 在 茶 些 
网 页 或 者 电子 邮件 上 花费 了 多 少时 间 ， 束 越 容 易 掌 握 和 调整 日 常 效 率 。 
当然 ， 由 于 移动 电话 变 成 了 空前 强大 的 计算 设备 ， 在 手机 上 退 踪 和 人们 应 
用 程序 使 用 记录 的 软件 也 被 开发 出 来 。 将 这 些 软件 数据 与 通过 手机 传 感 
器 和 其 他 程序 采集 到 的 数据 放 在 一 起 ， 可 以 推断 出 很 多 个 人 行为 信息 。 


除了 移动 电话 和 个 人 计算 机 之 外 ， 和 人们 在 日 第 生活 、 运 动 或 是 睡觉 


时 ， 也 越 来 越 多 地 主动 携 珊 各 种 专用 传 感 设备 ， 以 掌握 上 自己 的 生理 习惯 
和 健康 状况 。 谷 歌 眼 镜 ， 实 际 上 是 一 个 装配 了 小 型 显示 屏 、 摄 像 头 、 考 
克 风 、 处 理 器 和 无 线 通 信 的 头 部 穿戴 系统 。 因 其 通过 连 乡 ot 
方式 使 你 与 外 部 世界 保持 联系 并 记录 你 的 生活 而 广 受 关注 。 更 为 普 
模拟 类 似 功能 的 应 用 程序 所 产生 的 数据 ， 可 以 精确 地 显示 一 个 人 的 喘 体 
活动 状况 。 亲 有 眼看 到 这 些 数 据 可 以 激励 人 们 生活 得 更 加 健康 。 近 年 来 ， 
Fri hx] (Facebook) FIER (Twitter) 这 些 社交 网 站 的 日 益 流 行 ， 己 经 
形成 一 个 庞大 的 个 人 数据 库 。 人 们 在 这 些 站 点 上 进行 “状态 更 新 ”， 发 布 
可 以 反映 其 生活 状态 的 短 消 息 ， 回 答 诸如 “你 在 做 什么 ? 关 你 感觉 怎么 
样 ? ”你 周边 发 生 了 什么 ? “现在 有 什么 让 你 感 兴趣 的 事情 ? ”这 样 的 
问题 。 可 以 说 ， 状 态 更 新 在 某 种 意义 上 来 说 相当 于 用 户 对 一 个 社会 学 家 
的 社会 调查 问卷 做 出 的 回答 。 


一 经 发 布 ， 这 些 状 态 更 新 就 会 被 推送 给 社交 网 络 中 的 其 他 人 ， 在 茶 
些 情况 下 还 是 在 线 公 开 的 ， 可 以 被 任何 想 看 的 人 看 到 。 一 些 研究 人 员 在 
探索 根据 日 历 事件 和 位 置信 息 ， 自 动 进行 状态 更 新 的 方式 。 男 一 些 人 则 
试图 将 这 些 状态 信息 集中 解读 ， 已 有 软件 开发 者 编 出 一 些 简 单程 序 来 分 
析 这 些 内 容 。 这 些 程序 通常 将 特定 关键 词 进行 可 视 化 ， 依 据 词汇 出 现 的 
频率 设 定 字体 的 展示 大 小 。 通 过 这 种 方式 ， 人 们 可 以 大 致 了 解 目 己 一 段 
时 间 内 的 活动 和 感受 。 


越 来 越 多 的 人 开始 着 迷 于 上 自我 的 个 人 数据 ， 并 将 他 们 能 获得 的 所 有 
目 身 信息 结合 起 来 ， 包 括 手 机 通信 、 电 脑 使 用 、 生 物 传感器 、 摄 像 或 手 
工 录入 数据 记录 等 。 这 种 极端 的 量化 和 编目 方式 就 是 所 谓 的 “生命 记 
录 ”。 尽管 这 种 方式 并 不 算 普 这 ， 它 作为 一 种 更 好 地 了 解 自身 习惯 的 方 
法 ， 已 经 吸引 了 一 些 人 。 


工程 师 和 设计 师 推动 了 生命 记录 的 发 展 ， 因 为 他 们 发 明了 让 人 更 容 
易 进 行 生命 记录 的 网 络 应 用 和 其 他 拉 术 工具。 随 看 谷歌 眼镜 和 其 他 生命 


记录 工具 的 出 现 ， 更 重要 的 是 ， 这 些 工具 与 人 们 日 常生 活 结 合 得 更 加 紧 
密 ， 生 命 记录 对 普通 人 来 说 将 不 再 困难 。 这 种 活动 甚至 可 能 克服 社会 成 
见 ， 并 被 更 多 不 精通 技术 的 人 们 所 接纳 。 


在 本 章 中 ， 我 们 将 探讨 个 人 数据 可 以 通过 哪些 方式 被 采集 和 记录 ， 
包括 不 易 察觉 的 移动 电话 日 党 交互 ， 以 及 更 具 目 的 性 的 电子 公告 ， 如 状 
态 更 新 信息 等 。 我 们 还 将 讨论 ， 个 人 和 企业 在 数据 采集 和 分 析 过 程 中 都 
需要 时 刻 铭记 的 隐私 问题 ， 以 及 目前 在 实践 中 的 隐私 保护 方法 。 


肪 省 理工 学 院 的 数据 退 躁 项目 


2004 年 秋天 ， 抹 省 理工 学 院 开 展 了 一 个 研究 项 目 ， 辣 100 名 新 生 和 
在 校 学 生 提 供 预 装 定 制版 ContextPhones 程 序 的 诺基亚 6600 型 手机 。 该 程 
序 可 以 追踪 手机 连接 的 通信 其 站 代码 、 应 用 使 用 情况 以 及 手机 是 否 闲置 
或 是 在 充电 等 状态 信息 。 在 9 个 月 的 时 间 里 ， 该 研究 项 目 记 录 了 30 万 小 
时 的 用 户 数 据 。 


所 有 的 参与 者 都 被 告知 了 电话 记录 程序 的 功能 ， 并 被 要 求 签 署 同意 
书 ， 签 署 意味 着 他 们 知道 自己 的 手机 采集 的 是 什么 数据 。 参 与 者 可 以 在 
任何 时 候 抹 去 他 们 自己 的 数据 并 关闭 记录 功能 。 由 于 和 研究 无 关 ， 参 与 
者 的 手机 号 码 作为 附加 的 隐私 保护 措施 ， 此 次 研究 中 将 其 通过 单身 函数 
(MDS) 生成 唯一 代码 ， 并 无 法 被 道 运算 得 到 原始 手机 号 码 。 


诡 基 亚 6600 手 机 本 质 上 是 一 组 被 参与 者 们 几乎 一 直 随 号 携带 的 传 感 
器 。 过 去 很 多 年 里 ， 大 学 和 企业 的 研究 人 员 通 常 使 用 放置 在 房间 、 办 公 
室 或 是 设备 包 中 的 传感器 ， 来 有 来 集 个 人 的 位 置 、 与 其 他 人 的 位 置 关 系 、 
物理 位 移 其 至 是 周边 环境 声音 的 片断 等 信息 。 装 有 红外 线 或 RFiD (无 
ZS UA A ACE a) 的 智能 胸卡 被 设计 为 可 以 识别 其 他 同类 装置 ， 它 们 
被 用 来 研究 工作 场所 的 协作 以 及 会 议 中 的 社 交 。 这 些 传 感 副 和 智能 标记 


系统 相 比 过 去 的 大 包 传 感 器 和 电路 板 已 经 有 了 很 大 的 改善 ， 但 还 是 有 些 
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尽管 在 人 身上 装 传 感 需 的 方法 有 很 多 ， 但 这 个 话 基 亚 6600 的 现实 控 
掘 项 目 是 独特 的 ， 因 为 这 是 有 史 以 来 第 一 次 ， 研 究 人 员 以 可 扩展 的 方式 
追踪 研究 对 象 的 位 置 、 社 会 交往 和 习惯 。 项 目 进 行 时 ， 己 经 有 数 以 干 万 
计 的 手机 具备 运行 话 基 亚 6600 上 所 安装 的 超级 监测 软件 的 性 能 。 这 个 项 
目 证 明了 手机 可 以 成 为 可 靠 、 可 扩展 的 泛 在 计算 工具 ， 可 以 获取 比 以 往 
任何 时 候 都 多 的 行为 数据 。 在 行为 研究 方面 ， 过 去 大 多 数 社 会 学 家 采用 
调研 的 方法 所 获得 的 信息 ， 在 规模 和 精确 度 上 都 无 法 与 移动 电话 采集 的 
数据 相提并论 。 


选择 诺基亚 6600 型 手机 是 因为 它 装 备 了 塞 班 S60 系统 软件 平台 ， 该 
手机 可 以 运行 由 赫尔辛基 大 学 开发 的 定制 版 Context 软 件 ， 用 以 记录 个 人 
手机 的 所 有 状态 : 无 论 是 拨打 一 个 电话 还 是 充电 乃至 闲置 状态 。 这 款 手 
机 备 有 6MB Cb) 的 内 存 ， 并 可 以 使 用 最 大 32MB 的 多 媒体 闪存 卡 
进行 容量 扩展 。 手 机 没有 任何 锁定 功能 ， 并 且 可 以 使 用 任何 一 家 全 球 通 
言 系统 的 移动 电话 运营 商 ， 如 T_ Mobile 〈 德 国电 信 ) AT&T (美国 电话 
电报 公司 ) 和 Cingular 公 司 〈 已 被 AT&T 收 购 ) 。 定 制 的 应 用 程序 可 以 
通过 通用 分 组 无 线 服 务 数据 网 络 、 蓝 牙 、 存 储 卡 或 红外 端口 等 方式 安装 
到 手机 上 。 


手机 可 以 持续 不 断 地 扫描 和 记录 它 周 边 一 定 范围 内 的 蓝牙 设备 。 蓝 
牙 是 一 种 频率 在 2.4 兆 ~2.48 兆 赫兹 之 间 的 无 线 通信 协议 ， 在 1994 年 由 爱 
了 立信 公司 开发 ， 并 于 1998 年 发 布 ， 用 以 替代 设备 间 的 串口 连接 方式 。 每 
个 开启 蓝牙 的 设备 都 具有 “设备 被 发 现 ” 能 力 ， 它 会 寻找 并 发 现 周边 5~10 
米 范 围 内 其 他 蓝牙 设备 的 媒体 访问 控制 地 址 。 


该 研究 项 目 使 用 了 一 个 修改 版 本 的 BlueAware 应 用 程序 〈 移 动 电话 
版 MIDP2-Java) ， 对 发 现 的 蓝牙 设备 识别 地 址 在 邻近 的 服务 器 上 进行 


记录 和 时 间 蕉 记 “SS 。 因 为 如 果 使 用 标准 版 本 的 BlueAware 软 件 进行 持 
续 的 扫描 和 记录 的 话 ， 手 机 电池 会 在 18 个 小 时 内 耗 尽 ， 所 以 修改 版 本 将 
扫描 时 间 改 为 每 隔 5 分 钟 一 次 ， 从 而 使 手机 续航 时 间 增 至 36 个 小 时 。 当 
传感器 装 在 移动 电话 或 者 其 他 使 用 电池 的 设备 上 时 ， 考 虑 传感器 的 资源 
需求 和 维持 其 持续 扫描 的 其 他 可 行 性 就 至 关 重要 。 


与 BlueAware 软 件 类 似 的 一 个 软件 是 Bluedar， 是 为 装置 在 研究 参与 
者 的 社交 聚会 场所 的 设备 而 研发 的 。Bluedar 对 可 发 现 设 备 进行 持续 扫 
描 ， 并 将 蓝牙 设备 识别 地 址 通过 一 个 802. 11b 的 无 线 网 络 上 传 到 服务 器 
上 。 设 备 具有 一 个 包含 了 第 二 代 政 牙 心 片 的 核心 ， 可 以 被 XPort 型 网 络 
服务 器 所 控制 ， 并 能 有 效 探测 识别 周边 25 米 范围 内 的 蓝牙 设备 。 


除了 蓝牙 扫描 功能 ， 详 基 亚 6600 还 能 够 持续 记录 通信 基站 的 识别 号 
码 。 利 用 通信 基站 识别 码 获得 用 尸 定位 数据 已 有 大 量 的 相关 研究 ， 但 是 
通过 这 种 方式 获得 精确 的 位 置信 息 比 较 困 难 ， 因 为 手机 可 以 连接 到 几 英 
里 远 的 通信 基站 上 ， 而 在 城区 时 可 连接 的 范围 内 常常 会 有 数 十 个 通信 基 
站 。 


在 这 项 研究 中 ， 当 研究 对 象 在 茶 一 位 置 停留 的 时 间 足 够 长 ， 足 以 提 
供 一 个 预 估 的 信号 塔 概率 密度 分 布 函 数 时 ， 那 么 就 可 以 获得 相对 高 精度 
的 位 置 。 由 于 多 种 条 件 的 差异 ， 包 括 信 号 强度 和 网 络 状 况 等 ， 手 机 在 同 
一 位 置 不 同时 段 可 能 分 别 与 不 同 的 信号 塔 通 信 。 所 以 ， 在 一 段 时 间 内 ， 
手机 可 能 连接 了 好 几 个 信号 塔 。 另 外 ， 手 机 位 置 的 细微 改变 ， 甚 至 都 会 
引起 信号 塔 分 布 的 显 彰 变化 。 信 号 塔 识别 地 址 还 可 以 与 其 他 静态 监 牙 设 
备 如 人 台式 计算 机 相互 参照 ， 以 进一步 确定 移动 电话 位 置 。 


当然 ， 如 今 手 机 已 经 可 以 通过 很 多 更 直接 的 方式 记录 用 户 位 置 。 很 
多 智能 手机 奢 配 了 GPS 必 片 ， 而 谷歌 和 Skyhook 等 公司 使 用 三 角 定 位 拉 
术 ， 来 弥补 通过 无 线 基 站 信号 、 通 信 基 站 和 GPS 定位 不 足 《〈 在 室内 使 用 
时 精准 度 不 足 ) 的 问题 。 但 对 于 普通 手机 来 说 ， 通 信 基 站 识别 依然 是 最 


经 鹿 、 最 简单 也 是 最 可 靠 的 位 置 奶 踪 技 术 。 


在 麻 省 理工 学 院 这 个 基于 诺基亚 6600 的 研究 早期 阶段 ， 采 和 集 的 数据 
被 存储 在 手机 有 限 的 内 存 中 ， 研 究 者 需要 经 名 转 存 数据 ， 这 一 过 程 需要 
大 约 5 分 钟 ， 同 时 研究 人 员 还 可 以 升级 应 用 程序 。 然 而 由 于 一 个 月 的 数 
气量 就 有 5~10 光 ， 一 部 分 数据 束 需 要 被 存储 在 手机 的 外 置 内 存 卡 上 。 通 
过 对 程序 在 存储 卡 写 入 数据 效率 的 改进 ， 数 据 转 存 的 需求 被 延 长 至 数 月 
一 次 。 到 后 期 ， 使 用 T-Mobile 作 为 服务 丙 的 用 户 还 可 以 使 用 有 限 的 互联 
网 连接 将 数据 通过 电子 邮件 发 送 至 代理 服务 器 。 


最 后 ， 研 究 参与 者 还 完成 了 一 次 问卷 调查 ， 回 答 包 括 他 们 的 手机 使 
用 情况 、 日 常 行为 模式 、 对 麻 省 理工 学 院 的 满意 度 、 他 们 的 社交 圈 以 及 
工作 图 等 问题 。 问 卷 的 最 后 一 个 问题 涉及 所 有 研究 参与 者 ， 要 求 每 个 人 
对 目 己 与 其 他 每 个 人 之 间 的 互动 频率 进行 打分 ， 并 确认 其 他 人 是 否 在 目 
己 的 工作 或 朋友 阁 里 。 这 些 调 碍 获得 的 信息 作为 手机 中 获取 数据 的 补 
充 ， 帮 助人 们 更 好 地 进行 数据 分 析 。 


这 个 针对 百人 的 研究 项 目的 成 果 非 常 玛 舞 人 心 。 一 个 名 为 “本 质 行 
为 ”的 计算 机 分 析 工 具 进 行 分 析 所 得 结果 表明 ， 通 过 研究 菜 个 对 象 在 一 
天 中 早晨 的 所 在 位 置 、 与 其 他 参与 者 的 空间 接近 程度 、 通 话 记录 和 通话 
活动 等 ， 可 用 于 推测 其 当天 晚上 的 行为 。 例 如 ， 杂 个 人 在 一 个 星期 六 的 
上 午 10 点 醒 来 ， 那 么 可 以 比较 准确 地 预测 当天 晚上 他 会 跟 哪些 人 一 起 出 
现在 什么 地 方 。 另 外 ， 对 通话 记录 及 空间 接近 程度 数据 的 分 析 ， 能 够 得 
知 研究 参与 者 的 社交 网 络 关 系 和 社会 地 位 ， 比 如 ， 该 参与 者 是 学 校 的 新 
生 、 研 究 生 还 是 教授 ? 下 一 半 我 们 将 讨论 这 项 研究 的 成 果 可 以 有 哪些 进 
一 步 的 应 用 。 


自从 诺基亚 和 麻 省 理工 学 院 的 这 项 合作 研究 开展 以 来 ， 大 学 和 企业 
实验 室 的 很 多 研究 项 目 都 开始 利用 移动 电话 作为 传感器 来 采集 多 种 数 
据 ， 尽 管 主题 不 尽 相 同 。 例 如 ，2009 年 达 特 茅 斯 大 学 的 卢 弘 等 人 的 * 声 
音 感知 ”项 目 ， 通 过 iPhone《〈 平 果 手 机 ) 上 安装 的 软件 ， 以 一 种 低 功 耗 


和 保护 隐私 的 方式 捕捉 周围 的 声 首 ， 判 断 其 所 处 的 环境 。 因 为 如 果 手 机 
能 够 根据 声 首 特征 ， 判 断 出 一 个 人 处 于 重要 会 议 中 ， 束 可 以 将 一 些 人 的 
来 电 直 接 转 至 语音 信箱 ， 而 另 一 些 通 话 则 可 以 被 接 入 。 


肪 省 理工 学 院 的 媒体 实验 室 开 友 了 知名 的 Funf 开 放 感 知 框架 系统 ， 
作为 一 个 开放 和 公开 的 系统 ， 它 可 以 被 用 于 退 踊 手机 的 各 种 活动 。Funf 
框架 可 以 从 手机 上 的 多 种 “探测 仪 ”获取 数据 ， 例 如 :” GPS、 定位 仪 、 加 
速 仪 、 通 话 记 录 、 应 用 使 用 情况 、 屏 硕 状 态 以 及 电池 状态 等 ， 并 加 密 存 
储 在 手机 上 。 在 Funf 这 样 一 个 基础 框架 上 ， 任 何 一 名 开发 者 都 可 以 进 一 
步 开 发 符合 自身 需求 的 软件 。Funf Journal 则 是 一 个 现成 的 安 卓 系统 手机 
应 用 程序 ， 它 可 以 安全 地 将 探测 到 的 各 种 手机 数据 加 蜜 存储。 人们 还 可 
以 将 数据 下 载 到 自己 的 电脑 或 上 传 到 远程 服务 器 上 ， 以 供 进 一 步 分 析 。 


除了 Funf 框 架 ， 还 有 很 多 为 手机 和 个 人 电脑 设计 的 应 用 程序 ， 用 于 
获取 商业 性 的 数据 。 如 果 你 无 法 基于 框架 上 自己 开发 软件 ， 那 么 这 些 人 简单 
易 用 的 商业 应 用 程序 是 不 错 的 选择 。 特 别 是 ， 有 些 应 用 程序 可 以 通过 监 
控 个 人 电脑 在 芭 些 网 站 或 是 某 些 软件 上 的 使 用 时 间 ， 从 而 推算 计算 机 使 
用 者 的 工作 效率 ， 这 已 经 发 展 成 为 一 小 块 细 分 的 专业 市 场 。 


手机 一 一 最 佳人 体 传 感 占 


肪 省 理工 学 院 的 现实 挖掘 项 目 为 通过 开展 以 手机 为 基础 的 研究 来 及 
集 个 人 数据 这 样 的 做 法 提供 了 民 好 的 范例 。 研 究 中 使 用 了 赫 尔 笠 基 大 学 
开发 的 一 个 定制 软件 ， 可 以 退 踪 手机 的 各 种 状态 ， 如 通话 中 、 充 电 中 、 
关机 状态 等 。 尺 管 作 为 一 个 研究 项 目的 定制 软件 ， 一 般 人 没有 机 会 接触 
它 ， 但 是 市 面 上 还 有 很 多 其 他 具备 类 似 记 录 功 能 的 软件 。 其 中 一 些 软件 
可 以 直接 录入 GPS 数据 ， 而 不 需 通 过 移动 运营 丙 或 是 使 用 Wi-Fi〈 无 线 
网 络 ) 三 角 定位 法 来 获得 手机 的 位 置信 息 。 


在 互联 网 上 搜索 一 下 ， 就 能 找到 很 多 网 站 出 售 这 些 可 以 安装 在 于 末 
手机 、 黑 每 手机 ， 以 及 朔 有 安 持 、 微 软 和 守 班 等 手机 操作 系统 的 软件 。 
这 些 软件 有 的 是 为 那些 担心 使 用 手机 的 孩子 和 孩子 所 处 位 置 的 父母 而 设 
计 ， 有 的 是 为 想 要 掌握 其 员工 使 用 公司 配备 手机 情况 的 雇主 而 设计 ， 也 
有 的 是 为 怀疑 为 一 半 有 不 中 行为 的 人 而 设计 的 。 需 要 注音 的 是 ， 不 同 的 
国家 和 地 区 ， 对 于 从 个 人 移动 电话 采集 数据 有 相应 的 法 律 规定 ， 想 要 合 
法 地 采集 数据 ， 需 要 征 得 手机 所 有 者 或 是 设备 所 有 者 的 同意 并 签 著 合 
约 。 


奶 踩 软件 安装 在 手机 上 并 在 后 台 和 运行， 时刻 记录 着 手机 的 一 切 活 
动 。 这 些 记 录 稍 后 会 被 发 送 到 远程 服务 器 上 ， 并 可 通过 一 个 网 站 获得 。 
包括 呼 入 和 呼出 号 码 、 通 话 时 长 以 及 时 间 戳 记 在 内 的 通话 记录 会 被 采 
Se; 即使 在 手机 上 已 经 被 删除 ， 文 字 短 信也 会 被 完整 地 存储 在 远程 服务 
器 上 ;还 有 GPS 位 置信 息 也 能 在 具备 信号 的 地 方 被 记录 下 来 。 有 些 具备 
特定 功能 的 手机 ， 其 网 址 访问 记录 也 会 被 存储 下 来 。 


针对 个 人 计算 机 的 类 似 商 业 监 控 软 件 也 同样 存在 。 这 类 软件 的 销售 
主要 面 同 那 些 希 望 掌握 自己 计算 机 使 用 情况 ， 希 望 借 此 进行 自我 管理 并 
提高 生产 效率 的 人 。 全 世界 现在 有 数 百 万 人 每 天 使 用 计算 机 的 工作 时 间 
都 长 达 数 小 时 ， 包 括 使 用 电子 邮件 、 即 时 通信 、 网 页 浏览 软件 以 及 文 
字 、 图 片 和 基本 上 所 有 在 电脑 上 运行 的 软件 如 视频 处 理 软件 。 而 像 
RescueTime、Klok、SlimTimer 和 WorkTime 这 类 软件 ， 可 以 追踪 记录 前 
台 软 件 运行 的 时 间 ， 并 将 数据 反馈 给 用 户 。 


这 些 软件 有 的 是 直接 安装 在 电脑 上 ， 有 的 则 是 通过 网 页 运行 。 菏 些 
情况 下 ， 人 们 可 以 将 这 些 软件 捕捉 的 信息 打上 标签 ， 例 如 读 新 闻 故 事 ， 
并 分 孚 使 其 成 为 “公共 的 ?信息 。 人 们 还 可 以 设 定 东 些 特 定 应 用 的 目标 使 
用 时 间 ， 比 如 每 天 早晨 用 30 分 钟 回复 电子 邮件 。 然 后 软件 会 以 可 视 化 的 
方式 来 展现 设 定 目标 的 完成 情况 ， 并 且 使 用 者 还 可 以 设 定 任务 变更 提 
醒 ， 以 防 自 己 在 某 一 应 用 上 耗费 的 时 间 过 长 。 


除了 在 个 人 设备 上 进行 自动 退 踪 记录 的 后 台 软 件 外 ， 还 有 一 类 基于 
调查 的 手机 软件 也 在 迅速 发 展 。2009 年 秋天 ，Techneos 公 司 发 布 了 
SODA 系 统 ， 该 软件 系统 使 研究 人 员 、 调 研 公司 在 内 的 任何 人 都 可 以 在 
手机 上 发 布 调查 问卷 。 因 为 对 大 多 数 人 来 说， 手机 是 随 吴 携带 的 。 与 在 
线 问 卷 相 比 ， 手 机 问卷 可 以 选择 在 特定 时 间或 特定 地 点 进行 ， 与 电话 问 
卷 相 比 义 不 会 显得 那么 唐 突 。 


SODA 对 于 想 要 为 现实 挖掘 采集 信息 的 人 来 说 ， 将 会 是 一 个 有 趣 的 
工具 ， 因 为 相 较 通常 意义 上 的 问卷 调查 ， 它 可 以 让 人 们 提供 更 多 的 相关 
言 轧 。 比 如 经 参与 调查 者 的 许可 获得 其 位 置信 息 ， 他 们 还 可 以 在 问卷 中 
提 区 图 片 。 这 个 平台 非常 灵活 开放 ， 问 卷 问 题 种 类 非常 多 样 ， 可 以 是 多 
项 选择 、 浮 动 计 算 、 开 放 数 值 或 文本 、 声 首 文件 、 图 片 文件 其 至 是 条 形 
码 输入 。 男 外 ， 该 平台 还 支持 多 种 语言 ， 目 前 包括 汉语 、 英 语 、 法 语 、 
简 欧 牙 语 、 西 班 牙 语 、 德 语 、 印 度 语 、 日 语 和 泰语 。 


更 加 精确 的 生物 传 感 右 


通过 电脑 或 手机 记录 一 个 人 的 工作 效率 、 通 信 记 录 、 进 行 问卷 调 奉 
等 ， 只 是 人 们 日 常生 活 场景 中 的 一 部 分 。 生 物 传感器 则 可 以 填补 这 一 空 
缺 ， 它 可 以 精确 记录 每 日 不 同时 间 和 不 同 活动 中 人 们 的 生理 变化 。 研 究 
人 员 可 以 借助 一 些 特定 的 硬件 设备 退 踊 被 研 究 者 (通常 是 那些 慢性 疾病 
患者 ) 的 心率 、 血 压 、 皮 肤 导 电 性 以 及 其 他 一 些 指标 ， 或 是 在 一 些 需 要 
手动 记录 症状 、 饮 食 和 运动 信息 的 情况 下 ， 也 需要 借助 这 些 硬件 设备 。 


BodyMedia 是 一 家 知名 的 设备 以 及 在 线 服务 供应 商 ， 这 些 设备 和 服 
务 可 以 追踪 身体 活动 并 根据 健康 需要 适当 地 发 出 提醒 。CardioNet 公 司 则 
提供 便携 式 心 电 图 仪器 。 还 有 诸如 FitBit 计 步 器 、Nike+ 运 动 追 踪 系 统 、 
Polar 和 Garmin 的 GPS 手表 、Withings 的 无 线 体 重 分 析 仪 等 也 都 在 市 场 上 
占有 一 席 之 地 。 〈Zeo 公 司 的 个 人 睡眠 教练 同样 也 在 市 场 上 获得 了 一 定 


的 成 功 ， 它 是 一 个 追踪 睡眠 状况 的 无 线头 带 ， 可 以 根据 数据 分 析 情 况 发 
送 指令 到 床 边 的 阅 钟 或 手机 上 。 但 很 不 笠 ， 这 家 公司 于 2013 年 解散 

了 。) 为 外 ， 越 来 越 多 的 手机 应 用 程序 也 开始 使 用 手机 上 的 加 速度 仪 和 
GPS 传感器 来 采集 生物 计量 信息 。 表 1-1 列 出 了 一 些 用 于 记录 生物 数据 
的 商业 技术 。 


软件 开发 者 们 也 开发 出 了 可 以 提供 专业 睡眠 追踪 的 某 些 相同 功能 的 
手机 应 用 程序 ， 虽 然 精 确 性 仍 不 稳定 。iSleepTracker 和 Sleep ”Cycle 就 是 
其 中 的 两 个 ， 它 们 利用 手机 的 加 速度 传感器 感知 用 户 睡 虐 时 在 床上 的 动 
作 。 类 似 的 还 有 安 卓 平台 上 的 Smart Alarm 应 用 ， 它 可 以 预 判 人 们 的 睡眠 
阶段 。 因 为 这 些 应 用 程序 并 不 能 直接 衡量 一 个 人 的 动作 (而 且 判 断 的 结 
果 会 受 床 上 的 人 或 动物 数量 以 及 床 垫 性 能 的 影响 ) ， 它 们 的 主要 功能 似 
平 是 叫 醒 处 于 浅 睡 眠 阶段 的 人 ， 从 而 避免 人 们 在 深度 睡 虐 时 被 弄 醒 而 产 
生 不 适 。 


表 1-1 商业 化 感知 设备 的 用 途 、 性 能 和 交互 方式 


产品 用 途 特性 交互 方式 
Body Media 公 司 的 “| 监测 睡眠 质量 和 消耗 的 | 辟 带 形式 ， 其 中 装 有 一 个 用 于 | 臂 带 上 装 有 简单 的 LED 指 示 
Body Media FIT 卡路里 ， 主 要 适用 于 有 | 监测 动作 的 三 轴 加 速 仪 ,一 个 | 器 ; 更 详细 的 数据 会 通过 设备 
减肥 需求 的 用 户 测量 皮肤 温度 的 温度 计 ， 一 个 | 定期 上 传 到 服务 器 上 ， 用 户 可 
测量 皮肤 水 含量 的 皮肤 电 反应 | 以 在 网 站 上 获取 数据 
感应 器 ， 以 及 一 个 测量 身体 热 
量 散发 的 热流 传感器 
CardioNet 公 司 的 移 | 为 心律 不 齐 患者 监测 心 | 一 个 小 巧 的 ， 可 罕 戴 的 心 电 | 贴 在 佩戴 者 胸 前 的 电导 线 将 电 
动心 脏 门 诊 遥 感 器 “| 跳 和 其 他 问题 图 仪器 ， 可 以 24 小 时 监测 心 | 子 信号 传输 到 一 个 小 型 的 便携 
跳 ， 最 长 可 以 连续 记录 21 天 | 监控 器 上 ， 这 个 监控 器 可 以 戴 
在 脖子 上 。 当 心跳 异常 时 ， 监 
控 器 可 以 通过 无 线 传输 数据 到 
分 析 中 心 ， 在 这 里 ， 数 据 会 被 
进一步 分 析 并 给 医生 发 送 报告 
FitBit 公 司 的 FitBit 监 | 监测 特定 类 型 的 低 强 度 | 可 以 夹 在 裤子 或 文胸 上 的 一 个 | 一 个 家 用 基站 从 计 步 器 上 无 
测 器 身体 活动 以 及 睡眠 质量 | 小 型 的 、 不 显眼 的 计 步 器 。 每 | 线 传输 数据 到 计算 机 服务 器 ， 
次 充电 后 可 以 使 用 10 天 并 上 传 到 专门 汇总 这 些 数据 
的 网 站 


Zeo 公 司 ( 该 公司 于 | 监测 睡 眼 期 间 大 脑 和 脸 | 包括 一 条 头 带 ， 用 于 测量 睡眠 | 一 个 显示 睡眠 信息 的 专门 曾 

2013 年 解散 ) 的 Zeo | 部 肌肉 的 活动 阶段 和 质量 对 应 的 脑 电 波 活 | 钟 ， 以 及 一 个 分 析 睡 眠 信息 并 

个 人 睡眠 教练 力 。 数 据 通 过 无 线 传输 到 一 个 | 把 睡眠 质量 和 不 同 的 生活 方式 
专门 的 闹钟 上 ， 使 其 在 人 们 睡 | 关联 起 来 的 网 页 服务 

最 浅 的 时 候 叫 醒 他 们 


Innovative Sleep 监测 睡眠 活动 和 质量 | 一 个 类 似 手 表 的 设备 ， 用 于 监 | 有 一 个 提供 分 析 和 可 视 化 服务 
Solutions 公司 的 测 睡 眠 活动 的 网 站 
iSleep Tracker 


WIN Human Recorder | 监测 心跳 和 其 他 问题 ,| 一 个 小 型 的 感应 器 组 合 ， 贴 在 | 数据 被 传输 到 手机 或 电脑 上 ， 
公司 的 HRS-I 同时 还 监测 体温 和 活动 | 使 用 者 胸 前 ， 每 次 充电 可 以 使 | 可 以 在 线 浏 览 

用 3~4 天 
Garmin Forerunner | 记录 步行 或 跑步 的 时 | 一 个 类 似 手 表 的 设备 ， 监 测 不 a 据 通过 无 线 传 输 到 一 个 
910XT GPS 设 各 lA], FERS. WRU Bob | 同 模式 的 体 力 消耗 和 移动 距离 是 供 数据 分 析 和 分 享 的 网 
率 ， 还 有 游泳 时 的 距 站 一 一 Garmin Connect 

A. BCR. AAA 
及 冰 池 的 水 下 深度 


Nike+ 程 友 利 用 了 苹果 手机 、 安 早 手 机 以 及 iPod GER RAL 
a) 这 些 人 们 经 癌 在 跑步 时 用 来 听 音 乐 的 设备 ， 通 过 夹 在 鞋子 上 或 置 入 
在 耐 死 东 些 特制 鞋 袜 的 计 步 设备 采集 跑步 数据 ， 并 通过 无 线 设 备 传输 至 
手机 或 音乐 播放 器 上 。 当 设备 通过 用 户 的 计算 机 连 上 互联 网 进行 同步 更 
新 时 ， 数 据 会 被 上 传 到 耐 殉 公司 的 网 站 上 上， 用户 可 以 看 到 自己 的 进步 ， 
并 可 以 与 其 他 用 户 的 数据 进行 实质 比较 。 这 一 系统 的 目的 是 帮助 积极 跑 
步 或 徒步 的 人 记录 其 锻炼 成 果 。 


还 有 RunKeeper、Runtastic、Runmeter 等 手机 应 用 可 以 在 手机 与 GPS 
卫星 直接 联系 信号 条 件 较 好 的 情况 下 ， 通 过 GPS 定位 来 退 踪 人 们 的 户外 
活动 。 人 们 也 可 以 手动 输入 一 些 非 户外 活动 的 信息 ， 如 在 室内 游泳 等 。 
某 些 健身 设备 还 可 以 与 手机 直接 相连 并 同步 输出 数据 。 所 有 这 些 信息 都 
可 以 被 集成 到 一 个 可 视 化 图 表 中 ， 展 现 个 人 的 锻炼 进展 ， 以 及 不 断 癌 目 
标 靠 近 的 过 程 。 


RunKeeper 应 用 还 与 Withings 公 司 建 立 了 合作 。Withings 的 无 线 体重 
分 析 仪 可 以 在 人 们 每 次 称 体重 时 ， 将 数据 自动 同步 至 RunKeeper 网 站 。 


该 数据 可 以 被 用 来 玫 助 粗略 估算 用 户 以 一 定 速度 跑 完 特定 距离 需要 消耗 
的 热量 值 。 


上 面 提 到 的 这 些 应 用 和 设备 都 提供 了 多 层级 的 用 户 控 制 功能 ， 以 便 
用 户 控 制 被 采集 数据 的 导出 方式 。 有 些 应 用 自 带 人 免费 的 分 析 功 能 ， 需 要 
通过 付费 以 获得 一 些 高 级 功能 。 对 Body Media 公 司 来 说 ， 研 究 人 员 就 必 
须 购买 许可 才能 获取 设备 采集 到 的 所 有 数据 ， 而 没有 参与 研究 项 目的 个 
人 用 户 ， 则 需要 购买 该 公司 的 在 线 服务 并 提供 大 量 个 人 信息 ， 才 能 获 
得 。 虽 然 这 些 产品 为 我 们 提供 了 远 比 任何 时 候 都 多 的 对 于 自我 身体 的 认 
知 ， 用 户 还 是 应 该 认真 阅读 产品 用 户 协 议 ， 以 确保 清楚 地 知晓 数据 是 如 
何 采 集 和 使 用 的 ， 以 及 数据 的 所 有 权 归 属 等 问题 。 我 们 将 在 第 二 章 继续 
探讨 数据 所 有 权 的 问题 。 


可 以 感知 周围 环境 的 机 器 学 习 


很 多 生物 传感器 和 手机 应 用 都 具有 问 第 三 方 发 送 数 据 的 功能 ， 这 个 
第 三 方 可 以 是 你 的 医生 ， 也 可 能 是 公众 可 以 获取 健康 数据 的 公共 网 站 。 
本 质 上 ， 这 是 人 们 对 目 己 吴 体 状态 进行 的 “状态 更 新 "”。 近 年 来 ， 公 众 热 
训 于 各 种 各 样 的 状态 更 新 ， 因 此 提供 了 大 量 关 于 人 们 行为 习惯 的 信息 。 


有 些 行 为 退 踪 应 用 程序 可 以 在 一 个 活动 完成 后 ， 如 一 次 跑步 或 自行 
车 骑 行 后 ， 上 自动 更 新 推 特 或 脸谱 网 的 个 人 状态 。 前 面 提 到 的 达 特 茅 斯 大 
学 的 “声音 感知 ”项目 利用 手机 的 麦 苑 风 获 取 声 音信 息 ， 从 而 推 有 出 一 个 
人 所 处 的 位 置 环境 和 正在 从 事 的 活动 ， 并 可 以 用 来 简单 更 新 个 人 状态 ， 
如 在 一 家 咖啡 迄 中 、 在 户外 步行 或 是 正在 刷牙 等 。 这 个 程序 通过 机 器 学 
习 技 术 对 捕捉 的 声音 片段 进行 分 析 ， 对 音乐 、 人 声 等 一 些 基 本 的 声音 ; 
行 判断 ， 并 对 用 户 的 声音 特征 进行 目 我 学 习 。 当 然 ， 这 也 是 在 保护 隐私 
的 前 提 下 进行 的 ， 原 始 声音 片段 并 不 会 被 存储 下 来 ， 只 征 被 处 理 并 提取 
特征 信息 ， 这 些 特 征 信息 并 不 足以 被 用 来 再 现 原始 的 声音 片段 。 


生命 全 记录 


很 明显 ， 采 集 个 人 的 数据 和 信息 可 以 有 多 得 无 法 计数 的 方式 ， 但 是 
疝 没 有 统一 的 方法 来 采集 各 种 类 型 的 数据 ， 这 些 数据 目前 可 能 是 由 不 同 
软件 及 设备 自动 获取 ， 还 有 可 能 是 人 工 记录 的 。 不 过 已 经 有 越 来 越 多 的 
人 正在 试图 创造 一 种 可 以 记录 其 全 部 或 部 分 生活 的 方式 : 他 们 希望 关于 
目 己 的 一 切 都 可 以 被 量化 。 


生命 记录 作为 一 种 趋势 ， 在 技术 叶 疝 型 的 社会 群体 中 更 受 欢迎 。 其 
中 一 部 分 人 开发 了 在 线程 序 和 手机 应 用 来 记录 数据 ， 专 门 的 硬件 ， 如 罕 
戴 式 摄像 头 来 采集 视频 和 图 像 ， 以 及 电子 表格 用 以 记录 上 日常 活动 ， 如 吃 
东西 的 感受 以 及 不 同 的 情绪 等 。 生 命 记录 是 其 他 数据 采集 方法 的 补充 ， 
并 试图 在 一 个 紧密 框架 下 整合 数据 对 个 人 生活 进行 定量 化 的 描述 。 


生命 记录 具有 无 限 的 潜力 。 有 一 个 明显 的 作用 是 它 可 以 让 人 们 认识 
到 目 己 的 习惯 ， 以 及 习惯 的 小 小 改变 会 如 何 改变 他 们 的 生活 。 不 过 其 实 
还 有 更 多 意义 更 深远 的 可 能 性 。 如 今 ， 没有 人 真正 了 解 心脏 病 的 纵 同 指 
标 完 竟 是 什么 ， 但 是 随 着 越 来 越 多 的 人 对 自身 生活 如 此 多 的 生活 片段 进 
行 目 我 监测 并 将 其 分 画 ， 研 究 人 员 可 以 利用 这 些 数据 来 回顾 疾病 患者 几 
个 月 或 是 几 年 间 的 数据 ， 并 确认 一 些 相 关 性 、 可 能 诱因 ， 以 及 严重 疾病 
的 潜在 指标 。 


最 引 人 注 目的 那些 生命 记录 项 目 ， 往 往 都 采用 了 上 自动 影像 捕捉 技 
术 。2009 年 年 林 ， 动 作 捕 捉 设 备 生 产 商 美国 威 康 公司 授 权 微软 公司 使 用 
其 技术 ， 用 于 制造 和 销售 一 球 可 以 自动 招 摄 一 系列 贯穿 全 天 照片 的 穿 戴 
式 摄像 头 。 微 软 的 SenseCam 摄 像 设备 包括 一 个 广角 镜头 和 多 个 电子 感 
应 器 ， 其 中 有 光照 强度 和 光照 颜色 感应 器 、 被 动 红外 探测 器 、 逻 度 感应 
器 以 及 多 轴 加 速度 仪 等 。SenseCam 可 以 通过 程序 设 定 其 拍照 的 固定 时 
间 间 隔 ， 或 是 根据 佩戴 者 或 环境 变化 ， 通 过 感应 器 记录 ， 触 发 拍照 。 


如 今 ， 谷 歌 公 司 正在 积极 推广 他 们 的 生命 记录 设备 一 一 谷歌 眼镜 。 
REAP ENE ASDF. SURI. 麦克 风 、 微 处 理 器 以 及 无 线 模块 等 ， 全 都 集 
成 在 一 副 眼 镜 的 框架 上 。 通 过 语音 控制 ， 摄 像 头 就 可 以 拍照 或 摄像 。 谷 
歌 眼 镜 的 显示 屏 是 联网 的 ， 因 此 可 以 显示 短信 或 用 来 进行 导航 。 开 发 者 
们 还 可 以 为 谷歌 眼镜 开发 游戏 、 提 醒 软 件 等 各 种 新 的 应 用 。 虽 然 这 球 产 
品 还 处 于 研发 早期 ， 但 已 经 获得 了 很 大 的 关注 。 没 有 人 知道 它 在 技术 圈 
之 外 将 会 有 多 流行 ， 但 它 可 能 只 是 这 类 可 罕 戴 设备 的 一 个 先遣 部 队 而 
Es 


其 他 的 小 型 可 穿戴 相机 还 有 GoPro 和 Contour， 都 是 为 极限 运动 而 设 
计 的 。 这 两 者 都 有 多 种 类 型 的 基 座 ， 以 适应 不 同 的 使 用 方式 ， 如 固定 在 
头盔 上 或 是 用 安全 带 绑 在 胸部 。 男 一 种 叫 Loocxie 的 轻巧 型 摄像 头 则 可 
以 被 戴 在 耳 末 上 。 


有 一 些 在 线 博 客 积 索 了 不 少 关 于 这 些 生命 记录 设备 、 系 统 和 软件 的 
信息 ， 包 括 本 章 前 面 提 到 的 那些 。 戈 登 : 贝 尔 和 吉姆 : 戈 梅 尔 的 “全 面 回 
忆 ” 以 及 电文: 纠 利 的 “量化 自我 "都 是 关于 生命 记录 的 流行 博客 。 微 软 公 
司 的 戈 登 :贝尔 是 一 位 多 产 的 生命 记录 者 ， 他 已 经 为 一 个 叫 作 MylifeBits 
的 项 目 记 录 了 数 年 的 个 人 数据 。 这 个 项 目 可 以 在 线 碍 看 ， 图 片 、 视 频 、 
电话 通话 记录 、 个 人 信件 以 及 问候 卡片 等 都 被 分 类 记录 在 此 并 文 持 碍 
询 。 


想 全 面 记 录 你 的 生活 ， 刚 开始 最 好 能 有 一 些 引 导 。 有 时 候 人 们 从 关 
注 自 己 生活 的 某 个 方面 开始 ， 比 如 睡觉 和 起 床 的 时 间 ， 然 后 扩展 到 其 他 
比较 容易 记录 的 方面 。 哈 佛 大 学 的 “幸福 追踪 ?项 目 〈Track Your 
Happiness) 是 一 个 关注 单一 指标 的 记录 系统 。 参 与 者 会 收 到 系统 目 动 发 
送 的 短信 ， 通 过 短信 可 以 链接 到 一 个 简短 的 问卷 调查 ， 询 问 参 与 者 当前 
正在 做 什么 以 及 感受 如 何 。 在 连续 参与 几 周 每 天 数 次 的 问卷 回答 之 后 ， 
参与 者 会 得 到 一 份 将 参与 者 的 回复 形象 化 了 的 “个 人 幸福 报告 ”。 


另 一 个 名 为 “你 的 数据 流 ”(your.flowing.data) 的 系统 可 以 让 人 们 通 


过 推 特 消 息 ， 将 目 己 正在 做 的 事情 直接 发 送 至 一 个 在 线 数据 库 。 在 发 送 
的 推 敌 上 附加 预先 设 定 的 一 条 “阅读 X? 或 “观看 X” 的 标签 ， 可 以 帮助 精 
确 记 录 和 分 类 。 该 系统 可 以 记录 消 晨 发送 的 时 间 ， 同 时 形成 时 间 惟 记 信 
恩 ， 之 后 可 以 在 该 网 站 上 生成 可 视 化 的 活动 频率 图 。 


“天 天 日 记 ”(DailyDiary)〉 网 站 则 是 同 用 户 推 送 邮 件 询 问 特定 的 预 
先 选择 的 问题 ， 如 “你 今天 怎么 样 ? ”或 是 “你 今天 吃 了 些 什 么 ? ”用 户 通 
过 回答 这 些 问题 ， 获 得 相应 积分 ， 从 而 可 以 参与 一 个 在 线 社区 ， 碍 看 其 
他 人 辐 各 自 目 标 努 力 的 进展 情况 。 


尽管 有 这 么 多 的 工具 可 以 让 人 们 通过 数字 方式 记录 和 组 织 更 多 的 生 
活 信息 ， 但 这 些 工 具 尚 缺乏 易 用 性 ， 使 用 起 来 并 不 容易 ， 而 且 很 容易 让 
人 起 了 使 用 。 生 命 记录 的 目标 是 尽 可 能 多 地 采集 信息 ， 只 要 生命 记录 中 
还 有 很 大 比重 的 数据 需要 依靠 手动 输入 ， 它 就 仍 将 是 一 个 边缘 行为 ， 因 
为 记录 的 目标 是 获取 尽 可 能 多 的 信息 ， 而 大 多 数 人 只 是 选择 性 地 偶尔 记 
录 他 们 的 生活 事件 。 


人 们 有 越 来 越 多 的 方式 来 追踪 和 记录 自己 的 生活 和 习惯 ， 并 且 可 以 
在 后 人 台 被 动 地 完成 大 部 分 的 追踪 工作 ， 从 而 省 去 了 人 们 输入 信息 的 烦 
恼 。 一 些 人 也 许 会 认为 ， 个 人 数据 采集 会 真正 成 功 ， 直 到 人 们 不 再 需要 
不 时 关心 设备 状况 、 数 据 输入 和 调整 设置 ; 另 一 些 人 则 相信 和 人 的 主观 性 
应 该 始终 是 数据 采集 链 中 重要 的 一 环 ， 这 样 一 来 ， 他 们 才能 目 己 选择 哪 
些 数 据 应 该 以 什么 方式 在 什么 地 方 被 存储 下 来 。 


就 目前 情况 来 看 ， 个 人 数据 采集 技术 在 一 段 时 间 内 ， 将 采用 一 条 介 
于 上 述 两 者 之 间 的 路 径 。 每 个 人 对 目 己 个 人 信息 的 公开 程度 都 有 各 目的 
容忍 度 ， 所 以 最 好 的 方式 是 ， 追 踪 服 务 供应 商 提供 简单 易 懂 的 隐私 选 
项 ， 由 每 个 用 户 上 自己 来 进行 选择 和 设置 。 另 一 些 对 隐私 不 敏感 的 用 户 也 
会 感到 满意 ， 因 为 有 各 种 设备 来 帮助 他 们 目 动 完成 数据 采集 的 工作 ， 他 
们 只 需 在 想 要 回顾 某 个 事件 或 想法 时 再 去 查询 相应 的 记录 就 可 以 。 


如 今 的 软件 开发 者 们 比 以 往 任 何 时 候 都 更 需要 了 解 人 类 心理 学 和 社 
会 学 。 他 们 需要 了 解 ， 是 什么 因素 促使 人 们 去 记录 生活 中 的 一 些 特别 事 
件 或 活动 ， 以 及 如 何 才能 使 记录 成 为 人 们 的 日 第 习惯 ? 他 们 需要 了 解 ， 
如 何 将 被 动 式 后 台 记 录 的 数据 展示 给 用 户 ， 而 不 显得 唐 突 和 具有 侵扰 
性 ?他 们 需要 学 会 ， 如 何 让 记录 生活 的 设备 造福 于 人 ， 而 非 平添 负担 ? 
而 对 于 生命 记录 设备 的 开发 者 来 说 ， 他 们 还 需要 知道 ,仅仅 是 这 类 技术 
的 存在 这 件 事情 本 身 ， 就 可 能 极 大 地 改变 社会 动态 性 。 我 们 尚 不 清楚 ， 
一 旦 人 人 们 知道 自己 所 言 所 行者 可 以 被 尖 戴 谷歌 眼镜 的 朋友 和 陌生 人 ， 在 
不 易 察觉 且 示 经 允许 的 情况 下 记录 下 来 ， 将 会 做 何 反 应 。 下 一 章 将 讨论 
本 章 中 涉及 的 一 些 敏 感 问题 ， 并 探讨 数据 在 个 人 层面 的 一 些 具体 应 用 。 


1. 时 间 戳 记 (time stamp) ， 是 指 唯一 的 标识 某 一 刻 时 间 和 日 期 的 一 个 字符 序列 。 一 一 
译 者 注 
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如 何 充 分 利用 个 人 数据 ? 


即便 一 个 人 的 所 有 信息 数 据 都 可 以 被 采集 ， 依 然 还 存在 这 样 的 问 
题 : 这 些 数 据 可 以 被 用 来 做 什么 昵 ? 本 章 将 为 这 一 问题 提供 一 些 答案 ， 
包括 儿 个 具体 项 目的 介绍 ， 这 些 项 目的 目标 都 是 为 了 建立 一 个 可 以 让 人 
们 生活 得 更 加 健康 、 更 有 乐趣 的 系统 。 当 然 ， 这 些 项 目 也 都 还 处 于 各 自 
的 早期 阶段 ， 对 于 个 人 层面 的 数据 挖掘 也 还 俘 留 在 较 浅 层面 。 


一 类 激动 人 心 的 应 用 是 ， 使 用 个 人 数据 分 析 来 为 个 人 行为 提供 指 
导 ， 督 促 人 们 改变 行为 习惯 。 比 如 ， 提 醒 你 在 公司 的 会 议 上 更 多 或 更 少 
地 发 言 ， 控 制 你 在 某 个 网 页 上 的 浏览 时 间 ， 甚 至 是 督促 你 戒烟 。 市 场 上 
已 有 的 计 步 器 、 热 量 计 等 设备 已 经 可 以 反馈 有 关 健 康 习惯 的 信息 ， 试 图 
让 人 们 更 加 关注 所 吃 的 食物 ， 并 从 行为 上 有 所 改变 。 这 种 督促 被 付 诸 实 
践 的 程度 ， 将 会 决定 一 个 人 是 否 真 的 可 以 实现 他 的 目标 。 


个 人 数据 分 析 也 可 以 被 整合 到 一 些 特 定 的 系统 中 ， 当 判断 出 有 些 不 
太 寻 第 的 、 可 能 有 潜在 危险 的 事情 发 生 ， 或 是 财物 有 损坏 或 被 偷盗 的 风 
险 时 ， 这 些 系 统 可 以 发 出 通知 。 比 如 ， 可 以 追踪 用 户 的 位 置 以 判断 安全 


情况 ， 或 汽车 是 否 被 盗 等 。 


本 章 提 供 的 个 人 层面 数据 使 用 项 目的 列表 还 远 未 详尽 。 更 确切 地 
说 ， 本 章 只 是 对 那些 企业 家 和 研究 人 员 已 经 或 将 要 开始 思考 他 们 目 己 计 
划 的 领域 做 了 一 次 探索 。 这 类 项 目 目前 呈现 出 爆发 式 增长 的 态势 ， 每 天 
都 有 很 多 关于 个 人 数据 的 应 用 程序 出 现 ， 其 中 一 些 具 有 不 错 的 前 景 ， 有 
些 则 可 能 是 县 花 一 现 。 但 是 越 来 越 多 的 应 用 都 指 同 同一 个 发 展 趋势 : 使 
用 个 人 数据 来 为 每 一 个 人 服务 。 


暂且 不 谈 这 些 应 用 ， 基 于 个 人 数据 挖掘 的 这 些 项 目 和 产品 ， 都 清楚 
地 表明 我 们 需要 更 加 注重 隐私 保护 的 问题 。 哪 些 人 可 以 获得 茶 个 人 的 数 
ta? 数据 是 属于 那些 生成 数据 的 个 人 ， 还 是 属于 那些 数据 采集 技术 的 所 
有 者 ? 目前 这 些 都 尚 无 定论 。 


汽车 保险 公司 是 否 可 以 使 用 人 们 驾车 前 往 的 目的 地 的 数据 ， 从 而 收 
取 更 高 的 保险 费用 ? 已 经 有 一 些 健康 保险 公司 辐 穿 戴 计 步 恬 的 用 户 提供 
保费 折扣 ， 因 为 他 们 认为 这 样 的 用 户 会 进行 更 多 的 运动 ， 从 而 有 可 能 减 
少 喘 体 健康 方面 的 费用 支出 。 健 康 保险 公司 会 妃 躁 更 多 其 他 种 类 的 个 人 
数据 吗 ? 比如 用 户 的 吸烟 习惯 或 他 们 的 社交 网 络 ? 信用 卡 公 司 也 已 根据 
不 同 用 户 在 东 坚 特定 商店 购物 的 消费 情况 ， 癌 其 中 一 些 用 户 收 取 更 高 的 
SSCA. PRM, PEER A EWE? 获取 这 些 数据 的 公司 会 比 生成 这 些 
数据 的 个 人 获 益 更 多 吗 ? 


这 些 问题 都 还 有 竺 进一步 讨论 ， 但 在 本 章 中 ， 我 们 将 探讨 个 人 数据 
采集 中 的 隐私 和 政策 ， 以 及 这 些 方面 未 来 可 能 的 发 展 趋势 。 另 外 ， 我 们 
还 会 探 宛 如 何 让 人 们 尽 可 能 地 控制 个 人 数据 被 他 人 但 看 和 使 用 的 情况 。 


可 以 帮 你 戒烟 的 手机 应 用 


当 你 不 经 意 间 养 成 了 一 个 坏 习惯 时 ， 对 于 形成 这 个 习惯 的 环境 ， 你 

能 只 有 一 些 模糊 的 或 是 不 完整 的 概念 。 但 是 ， 如 果 你 能 够 将 这 个 坏 习 
惯 与 量化 的 行为 、 位 置 和 社会 状况 等 数据 关联 起 来 ， 也 许 你 束 有 办 法 改 
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吸烟 行为 的 研究 是 一 个 很 好 的 例子 。 该 项 目 还 处 于 早期 阶段 ， 它 希 
望 通过 将 行为 、 位 置 和 社会 交往 与 吸烟 行为 进行 关联 ， 试 着 通过 改变 人 
们 的 生活 习惯 来 改善 其 健康 状况 。 一 旦 这 些 关 联 因素 被 获知 ， 工 程 师 们 
就 可 以 开发 一 个 手机 应 用 ， 来 识别 潜在 的 诱 使 人 们 吸烟 的 环境 。 该 应 用 


可 以 适时 发 出 反 包 信息 ， 比 如 提醒 你 嚼 一 块 口香糖 ， 以 代 符 可 能 的 抽烟 
行为 。 而 且 我 们 有 理由 相信 ， 在 吸烟 研究 中 开发 的 方法 具有 被 应 用 到 其 
他 的 行为 改变 项 目 中 的 可 能 性 ， 如 一 般 性 药物 泪 用 和 依赖 、 高 风险 性 行 
为 、 营 养 平衡 以 及 日 第 锻炼 等 。 


由 内 和 森 : 伊 格 尔 和 他 的 同事 们 开展 的 这 个 研究 项 目的 研究 对 象 是 
18~25 岁 的 年 轻 烟 民 。 这 些 吸烟 者 中 ， 有 些 人 的 吸烟 频率 低 达 每 个 月 只 
吸 一 两 根 烟 。 但 是 近期 的 研究 表明 ， 即 使 如 此 低 的 吸烟 频率 ， 长 期 来 看 
也 可 能 成 首 。 而 将 研究 对 象 设 定 为 年 轻 烟 民 ， 古 因为 这 个 年 龄 段 的 吸烟 
者 比例 高 达 389%， 这 一 数据 超过 所 有 其 他 年 龄 段 。 


据 估 计 ， 侦 尔 吸烟 者 中 有 一 半 人 在 大 学 四 年 毕业 后 依然 吸烟 ， 但 田 
外 一 半 则 彻 确 戒 烟 了 。 这 表明 对 于 大 学 期 间 侦 尔 吸烟 的 人 来 说 有 一 个 转 
变 期 ， 在 此 期 间 ， 他 们 有 可 能 在 这 个 关键 时 期 转 为 不 吸烟 者 ， 而 这 正 是 
手机 应 用 可 以 介入 并 发 挥 作用 的 时 期 。 


使 用 手机 应 用 来 帮助 人 们 戒烟 并 不 是 一 个 新 奇想 法 。 事 实 上 ， 广 泛 
开展 的 禁烟 运动 就 是 通过 互联 网 和 移动 设备 ， 问 青少年 和 年 轻 人 发 送 禁 
烟 教 育 和 治疗 信息 。 然 而 ， 伊 格 尔 和 他 的 同事 们 开展 的 这 个 名 为 “生态 
瞬间 评估 ”(Ecological Momentary Assessment) 的 项 目 ， 其 目标 是 使 用 
手机 采集 实时 数据 ， 并 评估 同龄 人 的 关系 和 交往 对 个 人 吸烟 习惯 的 影 
啊 ， 以 及 促使 其 戒烟 的 可 能 。 这 个 项 目 结合 了 麻 省 理工 学 院 一 个 早先 的 
现实 挖掘 项 目的 相关 元 素 ， 利 用 手机 后 台 应 用 程序 针对 正在 发 生 的 个 人 
行为 通过 简单 问卷 调查 。 


就 这 个 项 目 来 说 ， 装 有 传感器 且 在 年 轻 人 中 普及 度 很 高 的 手机 ， 是 
一 个 非常 合适 的 研究 工具 。 该 项 目 计 划 对 纽约 城市 大 学 的 100 名 学 生 进 
行 数据 采集 ， 这 些 人 每 月 至 少 吸 一 根 烟 。 手 机 目 动 采集 并 上 传 各 种 行为 
数据 ， 包 括 通过 GPS 获得 的 位 置 和 移动 数据 、 通 过 通话 记录 获得 的 联络 
数据 以 及 通过 蓝牙 获得 的 与 他 人 的 空间 接近 撒 的 数据 等 。 


除了 这 些 上 自动 感应 设备 获取 的 数据 以 外 ， 研 究 参 与 者 还 被 要 求 通过 
手机 回答 一 些 问 题 ， 包 括 吸 烟 行 为 、 引 发 他 们 吸烟 的 社交 和 环境 氛围 、 
吸烟 的 迫切 度 ， 以 及 如 何 应 对 吸烟 需求 等 。 因 为 在 回答 这 些 问题 时 ， 手 
机 仍然 在 同步 记录 个 人 的 社交 网 络 信息 ， 将 这 些 信息 结合 起 来 ， 可 以 针 
对 个 人 及 其 吸烟 的 影响 要 系 形 成 一 个 生态 有 效 的 插 述 。 从 而 ， 利 用 这 样 
的 信息 分 析 结 果 告 知人 们 有 哪些 有 效 的 社会 支持 可 以 帮助 其 戒烟 。 


ee et 从 而 对 吸烟 者 生活 中 影 
啊 其 吸烟 行为 和 习惯 的 因素 进行 分 类 ， 而 且 其 精确 度 是 一 般 的 人 工 观 察 
无 法 达到 的 。 为 实现 这 个 终极 目标 ， 首 先 需要 建立 一 个 可 以 识别 每 日 、 
每 周旋 至 每 月 的 个 人 日 常 行为 结构 模式 的 算法 。 之 前 很 多 研究 项 目 都 提 
出 了 类 似 的 想法 ， 即 用 显示 个 人 日 常 活动 及 其 可 预测 性 的 方式 对 个 人 行 
为 进行 描述 。 当 人 们 将 手机 用 于 建立 模式 之 后 发 现 ， 该 方法 比 以 往 的 任 
何方 法 都 更 具 精 确 性 。 


这 项 研究 意义 深远 ， 从 实践 角度 来 看 ， 它 可 以 在 临床 研究 中 被 用 于 
回答 与 社区 网 络 相关 的 问题 ， 这 在 以 前 只 通过 观察 获取 数据 时 是 无 法 回 
答 的 。 未 来 临床 医生 将 可 以 识别 出 一 个 人 的 社交 网 络 中 ， 玫 助 哪些 人 最 
有 可 能 使 其 戒烟 。 此 外 ， 该 研究 生成 的 信息 还 可 以 改善 手机 的 干预 方 
包括 可 以 通过 手机 识别 用 户 所 在 的 场景 ， 从 而 提醒 用 户 ， 促 使 其 远 

可 能 诱 友 吸烟 的 场合 。 


这 个 项 目 在 理论 研究 层面 也 处 于 前 沿 ， 可 以 为 社会 、 环 境 和 心理 决 
定 因素 之 间 的 复杂 交互 研究 提供 新 的 灵感 ， 这 些 都 是 研究 者 们 多 年 来 认 
为 可 能 影响 年 轻 人 吸烟 习惯 的 因素 。 例 如 ， 关 于 年 轻 吸 烟 者 是 否 是 受到 
吸烟 朋友 的 影响 ， 还 是 与 他 们 的 朋友 们 在 同一 时 间 段 内 各 上 自分 别 养 成 了 
吸烟 的 习惯 ， 一 直 都 有 争论 。 而 区 分 这 两 种 不 同 的 情况 ， 对 于 设计 有 效 
的 干预 手段 来 说 是 非常 重要 的 。 


最 后 ， 这 项 通过 手机 进行 的 研究 中 所 采用 的 方法 ， 将 可 以 被 广泛 应 
用 到 其 他 关于 习惯 的 各 项 研究 中 。 事 实 上 ， 研 究 者 们 已 经 在 不 同 的 行为 


问题 研究 中 探索 类 似 的 解决 方法 。 在 埃 森 哲人 公司 的 一 项 研究 中 ， 工 程 师 
们 开发 了 一 个 应 用 ， 可 以 监测 人 们 在 一 次 会 议 或 是 谈话 中 的 讲话 时 长 。 
这 个 系统 通过 用 户 手 机 上 的 麦克 风采 集 谈话 数据 并 存储 在 一 个 中 央 服 务 
名 上 。 该 项 目的 目标 是 让 人 们 更 加 了 解 目 己 的 发 言 习惯 ,因为 友 言 往往 
是 难以 被 自我 掌握 的 。 然 而 ， 更 重要 的 是 ， 这 个 系统 还 整合 了 手机 推送 
功能 ， 它 可 以 根据 实际 情况 ， 判 断 用 户 发 言 时 间或 是 沉默 时 间 过 长 ， 从 
而 发 出 提醒 。 实 时 分 析 和 反馈 机 制 可 以 帮助 人 们 更 加 有 效 地 进行 社交 和 
商务 活动 。 


类 似 的 ， 计 算 机 上 的 行为 监测 软件 也 可 以 用 于 改变 一 个 人 的 坏 习 
惯 。 第 一 章 中 提 到 几 个 软件 ， 例 如 Slife、RescueTime、Klok、 
SlimTimer， 以 及 WorkTime， 可 以 监测 用 户 在 不 同 应 用 程序 上 所 花费 的 
时 间 ， 并 为 用 户 提 供 反 馈 报 告 。 这 些 软件 中 ， 有 一 些 还 可 以 提供 可 视 化 
的 分 析 ， 显 示 用 户 的 计算 机 使 用 习惯 ， 用 户 可 以 据 此 为 自己 制定 具体 目 
标 ， 如 某 些 特定 应 用 的 使 用 时 间 和 方式 。 尽 管 有 些 软件 已 经 可 以 通过 分 
析 获 得 数据 ， 用 来 制定 促使 你 改变 使 用 习惯 的 策略 。 但 其 实 人 们 可 以 利 
用 这 些 数据 做 得 更 多 。 例 如 ， 一 组 员工 可 以 在 某 个 工作 任务 中 直接 看 到 
其 他 人 的 数据 并 相互 竞争 ， 形 成 一 个 社交 性 的 博 奏 ， 而 不 仅仅 只 接受 机 
器 的 定时 提醒 。 生 产 效率 监测 工具 是 一 个 最 好 的 例子 ， 作 为 一 个 发 展 成 
熟 的 领域 ， 它 需要 工程 师 们 开发 更 多 的 创新 工具 进一步 提升 生产 效率 。 


老人 走失 、 汽 车 被 盗 前 预警 


另 一 类 使 用 个 人 数据 的 方式 是 建立 一 个 监测 系统 ， 当 某 人 的 行为 严 
重 超出 常规 ， 并 对 触及 可 能 的 有 害 或 危险 领域 时 进行 预警 。 目 然 ， 这 种 
紧密 监视 人 们 行为 ， 并 且 对 反 利 行为 进行 预警 的 想法 会 引起 个 人 隐私 问 
题 天 注 痢 的 和 警惕。 然而， 如 果 可 以 在 符合 伦理 要 求 的 情况 下 使 用 这 些 系 
， 它 们 可 以 在 一 些 场 合 发 挥 很 大 作用 ， 比 如 对 偷盗 汽车 的 行为 进行 巴 
符 ， 或 是 提醒 护士 、 病 人 有 异常 状况 。 
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这 一 类 系统 的 关键 之 处 在 于 采集 一 系列 关于 个 体 的 位 置 和 社会 交往 
数据 ， 并 基于 数据 分 析 来 判断 个 体 的 固有 行为 或 是 一 般 行 为 的 范围 ， 第 
一 章 对 此 已 有 讨论 。 


以 护理 监测 老人 为 例 ， 人 们 可 以 通过 固有 行为 来 判断 ， 某 个 事件 的 
发 生 是 否 超越 了 被 监测 人 的 行为 空间 。 一 个 人 的 行为 空间 ， 本 质 上 是 其 
行为 的 数学 表达 ， 包 括 一 系列 相互 依存 的 变量 。 所 谓 超越 行为 空间 的 事 
件 ， 并 不 单纯 是 东 人 之 前 没有 做 过 的 事情 。 而 是 根据 相关 数据 对 茶 个 行 
为 进行 分 析 ， 考 碟 到 先前 的 行为 特征 ， 发 现 这 件 事 发 生 的 概率 太 小 ， 以 
至 于 极 有 可 能 发 生意 想不到 的 状况 或 具有 潜在 危险 。 


设想 一 下 ， 如 果 一 个 老人 在 晚上 11 点 上 了 一 辆 公交 车 ， 前 往 城 市 里 
他 之 前 几乎 从 未 涉足 过 的 一 个 地 方 ， 并 且 他 的 社区 闻 中 也 没有 认识 的 人 
大 住 或 经 常会 出 现在 那里 。 那 么 ， 掌 握 这 个 老人 社交 信息 和 移动 数据 的 
手机 或 其 他 罕 戴 设备 就 可 以 判断 ， 这 个 老人 的 行为 是 售 超 越 了 他 的 一 般 
行为 范围 。 根 据 这 样 一 个 监测 系统 的 设置 ， 这 个 老人 可 能 会 得 到 系统 推 
送 的 通知 并 被 要 求 进行 反 饿 ， 或 是 老人 的 监护 人 会 收 到 警报 。 


包括 通用 电气 以 及 一 些小 的 初创 企业 在 内 的 许多 公司 ， 都 试图 在 快 
速 增长 的 老龄 人 群 监测 系统 市 场 上 占据 一 定 的 份额 。 很 多 系统 使 用 的 都 
征用 在 住宅 周围 安装 分 布 式 感应 圳 的 方式 对 一 个 老年 人 进行 监测 。 尽 管 
这 些 感应 器 可 以 高 精度 地 感知 一 些 特定 的 行为 《比如 正在 厨房 备 餐 ) ， 
但 它们 的 安装 和 维护 较为 复杂 而 且 也 很 昂贵 ， 因 此 可 能 会 限制 该 领域 和 
相关 公司 进一步 的 发 展 。 


像 这 种 基于 固有 行为 的 系统 也 可 以 用 于 汽车 防盗 。 虽 然 现 在 市 场 上 
己 经 有 多 种 无 线 电 汽 车 定位 系统 ， 包 括 LoJack 和 通用 电气 的 OnStar， 它 
们 可 以 在 汽车 被 盗 后 对 其 进行 定位 ， 但 基于 固有 行为 的 系统 可 以 更 具 前 
有 瞻 性 。 当 汽车 在 非 正常 时 间 被 敬 驶 到 非 正常 地 点 时 ， 这 类 系统 会 做 出 判 
断 并 向 车 主 进 行 确认 ， 以 确定 车 主 对 汽车 的 这 个 非 固 有 行为 知晓 。 


大 数据 ， 大 隐患 


当然 ， 所 有 的 现实 挖掘 程序 在 理论 世界 里 都 是 完美 的 。 现 实 挖掘 研 
完 项 目 能 够 很 顺利 地 进行 的 原因 之 一 束 是 ， 研 究 对 象 们 对 项 目的 要 求 充 
分 理解 ， 他 们 也 相信 研究 人 员 会 小 心 严谨 地 保护 他 们 的 隐私 。 而 且 他 们 
也 知道 该 项 目 会 结束 ， 他 们 可 以 选择 目 己 的 数据 被 采集 并 被 分 机 ， 也 可 
以 随时 选择 退出 而 不 会 有 任何 损失 。 


然而 ， 从 科研 到 现实 世界 的 转换 是 微妙 的 。 如 果 是 一 个 第 三 方 公司 
在 获取 个 人 数据 并 提供 反馈 ， 那 么 如 何 才能 保证 隐私 得 到 恰当 的 保护 
Ne? 有 意思 的 是 ， 由 于 移动 电话 所 具有 的 基本 特点 ， 个 人 层面 数据 采集 
的 隐私 保护 相对 来 说 可 能 是 最 容易 的 。 被 采集 的 数据 可 以 通过 多 种 方式 
存储 到 云端 或 企业 设置 的 远程 服务 右上， 但 还 有 其 他 的 选择 : 手机 可 以 
将 数据 存储 在 本 地 。 因 为 手机 的 处 理 器 能 力 和 存储 空间 每 两 年 就 能 翻 一 
番 ， 因 此 就 在 前 两 年 ， 一 个 小 小 手机 在 计算 能 力 上 已 经 相当 于 体积 上 比 
它 大 很 多 的 个 人 计算 机 了 ， 现 实 挖掘 的 任务 完全 可 以 在 移动 设备 上 进 
行 。 不 断 增 长 的 手机 计算 和 存储 能 力 ， 使 得 数据 不 必 非 得 上 传 到 远程 服 
务 句 上 才能 进行 处 理 、 存 储 或 分 享 给 第 三 方 。 这 就 是 说 ， 目 前 大 部 分 的 
数据 分 析 ， 采 用 的 是 本 地 手机 和 远程 服务 器 共同 分 析 的 混合 方式 。 然 
而 ， 根 据 1986 年 通过 的 《美国 电子 通信 隐私 法 案 》， 在 东 些 情况 下 ， 执 
法 部 门 和 政府 部 门 不 需要 获得 任何 授权 ， 只 需要 一 张 传 昧 ， 束 有 权 获 取 
远程 服务 器 上 的 个 人 数据 。 但 是 ， 如 末 想 要 获得 存储 在 个 人 计算 设备 上 
的 数据 ， 则 依然 需要 授权 许可 。 


即便 如 此 ， 绝 大 多 数 提供 个 人 数据 采集 服务 的 公司 ， 仍 然 选 择 本 地 
和 远程 服务 器 的 混合 方法 。 存 储 在 远程 服务 器 上 的 数据 可 以 被 用 于 分 析 
以 改进 产品 。 男 外 ， 这 些 数据 本 里 对 于 公司 来 说 也 具有 很 高 的 价值 ， 可 
以 用 于 定位 目标 客 己 需求。 所以， 尽管 从 技术 上 来 说 ， 用 户 具有 了 掌握 
数据 的 可 能 性 ， 但 实际 上 他 们 可 能 根本 没有 这 个 选择 权 。 此 外 ， 想 要 搞 
清楚 数据 的 存储 和 处 理 是 在 本 地 设备 还 是 在 远程 服务 器 上 进行 的 ， 需 要 


一 定 的 技术 守门 ， 对 于 智能 手机 来 说 更 是 如 此 ， 因 为 智能 手机 的 应 用 总 
古 在 后 台 进 行 不 断 的 网 络 连接 。 而 要 想 搞 清楚 所 有 使 用 程序 的 服务 条 
球 ， 则 需要 很 强 的 心理 负 蓓 能 力 : 哪些 数据 是 与 其 他 公司 共享 的 ? 哪些 
会 让 数据 失效 ? 服务 条 球 是 合 有 更 新 ? 更 新 了 哪些 内 容 ? 如 果 你 对 这 个 
程序 的 服务 不 其 满意 ， 是 否 可 以 将 数据 转 入 至 其 他 程序 ? 


如 此 说 来 ， 如 果 在 哪个 领域 内 可 以 建立 坚实 的 数据 所 有 权 的 条 球 ， 
那么 必然 是 在 个 人 层面 。 因 此 ， 数 据 所 有 权 和 隐私 保护 的 新 法 规 需 要 由 
企业 、 用 户 、 团 体 组 织 以 及 法 律 专家 共同 来 制定 。 毕 竞 ， 我 们 很 容易 想 
象 出 那些 个 人 数据 的 使 用 和 分 析 可 以 被 用 来 控制 、 胁 迫 或 勒 穴 用 户 的 情 
况 。 当 健康 保险 公司 发 现 一 个 客户 正 与 可 能 会 增加 其 吸烟 可 能 性 ， 同 时 
减少 其 运动 可 能 性 的 朋友 外 出 ， 保 险 公司 是 人 否 可 以 据 此 提高 保费 ? 如 果 
软件 可 以 通知 虐待 老人 的 护 工 ， 他 /她 所 看 护 的 老人 正在 前 往 一 个 更 安 
全 的 地 方 ， 那 么 到 底 谁 是 技术 的 受益 者 呢 ? 和 警察 在 被 控告 跟 踊 别 人 或 实 
施 家 许 暴 力 时 ， 是 否 有 权 退 碍 他 的 行踪 ? 汽车 保险 公司 是 否 可 以 根据 客 
己 经 第 开车 前 往 的 目的 地 的 安全 程度 ， 来 收取 相应 的 保险 费用 呢 ? 


过 去 儿 年 ， 在 地 方 政府 处 理 大 量 个 人 和 公共 感知 设备 相关 事务 的 过 
程 中 ， 所 有 以 上 提 到 的 问题 都 得 到 了 极 大 的 关注 。 其 中 有 些 问题 的 答案 
己 经 开始 有 些 眉目 了。 在 接 下 来 的 几 个 部 分 中 ， 我 们 将 简要 介绍 个 人 数 
据 层 面 三 个 重要 的 应 用 程序 ， 从 中 可 以 看 出 ， 在 茶 些 领域 ， 我 们 迫切 需 
要 一 种 新 的 数据 隐私 和 所 有 权 形 式 : 比如 健康 保健 奖励 机 制 、 现 轰 现 付 
的 汽车 保险 ， 以 及 对 家 放 暴 力 和 护 工 虐待 行为 的 防范 等 。 尺 管 这 些 只 是 
对 个 人 数据 采集 可 能 带 来 的 问题 的 初步 探讨 ， 但 作为 一 个 展 好 的 开端 ， 
它们 可 能 会 帮助 我 们 找到 可 以 广泛 应 用 于 不 同 领域 的 解决 方案 。 


健康 激励 是 与 非 


对 拥有 不 健康 生活 习惯 的 客户 进行 经 济 处 昼 的 做 法 并 不 和 常见， 如今 


最 利用 的 是 一 种 所 谓 的 健康 激励 项 目 ， 即 参与 者 如 采 选 择 了 更 好 的 生活 
Jit, MASI, GRAD MAS PART. SEE, 
去 的 几 年 中 , “健康 激励 管理 行业 ”出 现 了 越 来 越 多 的 运营 公司 。 这 些 公 
司 帮 助 雇主 激励 其 员工 参加 康 体 活 动 ， 促 使 他 们 的 生活 方式 问 独 积极 健 
康 的 方 回转 变 。 


这 个 领域 的 公司 包括 Virgin Health-Miles. RedBrick — Health, 
Tangerine Wellness 等 ， 它 们 帮助 雇主 调解 其 员工 的 健康 保险 理赔 ， 从 而 
最 终 减 少 雇主 的 文 出 。 雇 主 可 以 考虑 如 何 利 用 贡 省 下 来 的 这 部 分 文 出 来 
激励 员工 选择 健康 生活 ， 一 些 雇主 选择 降低 员工 的 自 付 额 ， 另 一 部 分 选 
择 减 少 保险 费 或 共同 付费 额度 等 。 


总 体 来 说 ， 有 两 种 项 目 类 型 一 类 是 对 参加 健康 相关 课程 的 人 进行 
奖励 ， 如 一 个 戒烟 辅导 等 ， 另 一 类 是 对 达到 某 些 健康 指标 的 人 进行 奖 
励 ， 比 如 在 一 定时 间 内 减 重 30 磅 〈 约 合 13.6 千 克 ) 体重 。 这 两 种 类 型 的 
案例 中 ， 参 与 者 都 有 可 能 获得 每 个 月 100 美 元 及 以 上 的 健康 保险 费用 减 
免 。 


计 步 器 、 手 机 上 的 加 速度 仪 、 心 率 监 测 仪 以 及 数据 记录 网 站 等 感知 
端 ， 在 这 类 健康 激励 项 目 中 扮演 着 日 益 重 要 的 角色 。 例 如 ， 有 的 项 目 使 
用 计 步 器 来 设置 员工 可 以 参加 的 挑战 ， 还 有 的 项 目 使 用 这 些 感知 设备 帮 
助人 们 设置 健康 目标 。 如 果 某 个 人 在 某 个 项 目 中 的 表现 不 佳 ， 也 不 会 被 
罚款 ， 只 是 他 会 因此 失去 了 一 个 节约 保费 的 机 会 。 是 否 参 加 这 些 项 目 全 
赁 自愿 ， 但 它们 确实 正 变 得 越 来 越 受 欢迎 ， 有 些 公司 员工 的 参与 率 其 至 
高 达 809%。 


使 这 些 项 目 具 有 自愿 性 ， 并 且 以 “为 自己 省 钱 ” 的 概念 来 代 蔡 “ 司 
款 ”， 帮 助 项 目 在 近 些 年 获得 了 广泛 的 参与 。 在 2007 年 和 2008 年 ， 包 括 
百 得 和 惠而浦 在 内 的 公司 都 开始 对 吸烟 的 员工 处 以 罚金 。2008 年 ， 囊 而 
浦 解雇 了 一 名 为 了 逃避 每 年 500 美 元 的 吸烟 罚金 而 撤 议 的 员工 。 然 而 ， 
这 个 事件 至 少 使 得 一 家 公司 一 一 Tribune 公 司 放弃 了 对 吸烟 员工 进行 惩 


罚 ， 这 表明 有 些 公司 更 愿意 选择 “萝卜 ”而 非 “ 大 棒 ? 政 策 。 


尽管 这 类 健康 激励 项 目 己 经 存在 很 多 年 了 ， 但 未 来 这 类 项 目的 数量 
以 及 其 中 使 用 的 技术 的 复杂 程度 都 将 提升 很 多 。 感 应 器 不 仅 越 来 越 便 
宜 ， 体 积 也 越 来 越 小 ， 更 重要 的 是 ， 立 法 也 在 推动 这 个 产业 的 发 展 。 
2010 年 的 春天 ， 美 国 总 统 奥巴马 签 普 了 一 个 推动 该 行业 发 展 的 法 案 ， 包 
括 增加 提供 健康 管理 项 目的 企业 数量 、 提 升 员工 参与 人 数 、 更 加 有 效 地 
追踪 项 目 以 及 提升 项 目的 整体 效果 等 内 容 。 坚 无 疑问 ， 实 施 健康 激励 项 
目的 公司 从 中 获得 了 财务 上 的 回报 。 美 国 健康 理事 会 称 ， 在 健康 激励 项 
目 上 多 投资 1 美元 ， 在 医疗 保健 的 文 出 上 就 能 相应 节约 3 类 元 。 


但 是 ， 如 何 保护 员工 的 健康 隐私 呢 ? 根据 2008 年 《美国 残疾 人 法 
案 》 (ADa) 修正 案 ， 雇 主 不 得 向 员工 询问 其 医疗 健康 状况 ， 除 非 是 工 
作 相 关 并 且 有 业务 上 的 需要 。 然 而 ， 美 国平 等 就 业 机 会 委员 会 
(EEOC) 2002 年 的 一 份 实施 指南 中 称 ， 即 使 不 与 工作 相关 或 符合 业务 
需要 ， 雇 主 仍 然 可 以 了 解 员工 的 医疗 历史 ， 作 为 健康 管理 项 目的 一 部 
分 。1996 年 的 《健康 保险 携带 和 责任 法 案 》 (HIPAA) 及 2006 年 的 后 续 
法 规 ， 人 允许 雇主 在 员工 健康 计划 中 安排 多 样 化 的 保费 、 免 赔 额 以 及 共同 
负担 保费 的 支付 标准 。《 健 康 保险 携带 和 责任 法 案 》 中 的 反 歧 视 条 款 ， 
禁止 对 健康 状况 相似 的 员工 收取 不 同 保费 。 但 现在 还 不 清楚 《健康 保险 
携带 和 责任 法 案 》 及 一 些 新 规 中 的 类 似 条 款 ， 如 何 与 美国 平等 就 业 机 会 
委员 会 要 求 的 自愿 原则 相 协 调 ， 并 与 《美国 残疾 人 法 案 》 中 的 隐私 规定 
相 一 致 。 


这 类 项 目的 另 一 个 挑战 是 如 何 保证 基本 的 公平 性 。 早 期 相关 法 案 的 
一 个 重要 规定 是 奖励 额度 不 得 超过 员工 保险 额度 的 20%， 但 2010 年 奥 巴 
马 签署 的 新 法 案 将 比例 限额 提高 到 了 30%。 有 些 机 构 认 为 这 一 比例 过 
高 ， 可 能 会 对 低 收 入 者 造成 过 多 负担 ， 因 为 低 收 入 者 相 比 高 收入 者 更 可 
能 出 现 健康 状况 。 


当 越 来 越 多 的 雇主 开始 实施 健康 激励 项 目 以 应 对 逐年 上 涨 的 健康 保 


险 费 用 时 ， 这 些 问 题 将 逐渐 浮 出 水 面 ， 并 成 为 中 心 议 题 。 并 且 ， 当 人 们 
能 够 通过 更 加 精确 的 感知 设备 和 算法 ， 来 判断 茶 些 特定 行为 与 健康 状况 
好 坏 之 间 的 因果 关系 时 ， 这 些 问 题 会 变 得 更 加 复杂 。 


车 载 感应 功 与 过 


如 今 ， 很 多 新 车 上 都 装配 了 GPS 和 其 他 导航 设备 、 用 于 辅助 泊 车 和 
倒车 的 外 部 摄像 尖 、 探 测 车 辆 间距 离 的 感应 费 ， 以 及 远程 控制 锁 车 和 点 
火 的 控制 器 。 在 茶 些 情况 下 ， 这 些 系统 能 使 警察 快速 地 退 踪 到 一 辆 被 盗 
汽车 ， 甚 至 远程 控制 将 车 伸 火 。 


随 着 汽车 的 控制 系统 愈加 计算 机 化 ， 我 们 可 以 合理 地 推测 ， 未 来 的 
某 些 车 型 中 可 能 会 安装 可 以 提供 驾驶 习惯 的 一 般 性 反馈 的 感知 设备 。 实 
际 上 ， 现 在 想 监 控 轨 驶 过 程 的 话 ， 人 们 只 需要 购买 并 安装 一 套 基 于 GPS 
的 区 驶 监测 追踪 系统 就 可 以 了 。 有 些 保险 公司 招募 志愿 者 ， 并 使 用 这 类 
车 载 感 知 设备 来 评估 他 们 的 安全 要 驶 习惯 ， 据 此 对 其 保险 费用 的 收取 和 标 
准 进行 调整 。 


传统 的 汽车 保险 根据 驾驶 者 的 过 往 敬 驶 经 历 计 算 保 费 。 衡 量 一 个 敬 
驶 者 是 否 “ 安 全 ”包括 很 多 方面 的 考量 : 有 记录 的 交通 违规 、 年 龄 、 所 驾 
驶 汽车 的 类 型 等 。 然 而 ， 近 年 来 上 肥 展 出 了 一 种 新 的 模式 ， 被 称 为 
PAYD (pay-—as—you—drive, “E25 MAT?) 。 


PAYD KER ti Be a Ee EEA BY ce 
驾驶 习惯 的 持续 反馈 。 简 而 言 之 ，PAYD 根 据 汽车 的 里 程 数 据 ， 对 驾驶 
频率 较 低 的 殴 驶 者 降低 其 保费 的 收取 。 但 是 车 载 感 知 设备 可 以 获取 更 多 
更 精确 的 数据 并 反馈 给 保险 公司 ， 包 括 速度 、 距 离 、 每 天 的 开车 时 间 ， 
有 时 则 是 一 些 GPS 数 据 。 该 系统 可 以 让 保险 公司 针对 参 保 人 超速 行驶 区 
驶 时 间 过 长 ， 以 及 经 第 开 到 犯罪 多 友 区 等 情况 征收 较 高 的 保险 费用 。 


美国 的 很 多 保险 公司 ， 包 括 Progressive、Liberty Mutual, 
MileMeter， 以 及 GMAC， 都 采用 PAYD 方 案 ， 少 数 几 个 英国 、 加 拿 大 、 
南非 和 日 本 的 公司 也 提供 一 些 PAYD 选 择 。 在 美国 有 超过 30 个 州 认 可 
PAYD 方 案 ， 但 由 于 客户 的 需求 不 多 ， 该 方案 在 美国 以 外 的 国家 被 接受 
的 进程 一 直 十 分 缓慢 。 


例如 ， 加 利 福 尼 亚 州 在 2009 年 束 推 动 了 PAYD 保 险 方案 的 立法 。 除 
了 可 以 为 一 些 司机 降低 保费 ，PAYD 方 案 还 提供 奖励 政策 以 减少 人 们 不 
必要 的 驾车 出 行 ， 从 而 降低 温室 气体 的 排放 。 据 估算， 如 果 PAYD 保 险 
方案 能 在 全 美 范围 内 达到 30% 的 使 用 率 ， 将 可 以 减少 10% 的 汽车 行驶 总 
里 程 ， 这 意味 着 可 以 在 10 年 内 减少 大 约 5 500 万 吨 的 二 氧化 矶 排放 量 。 


在 加 利 福 尼 亚 州 推出 的 最 初 方案 中 ， 保 险 公 司 可 以 要 求 用 户 在 他 们 
的 汽车 上 安装 电子 监控 设备 。 因 为 里 程 数据 调整 起 来 很 容易 ， 所 以 这 种 
方法 与 仅 依赖 汽车 里 程 表 相 比 ， 可 以 减少 用 户 欺诈 的 可 能 性 。 但 是 ， 一 
个 非 营 利 性 的 数字 版 权 倡议 法 制 组 织 一 一 电子 前 沿 基 金 会 迫使 立法 者 对 
该 法 案 进行 了 修改 ， 将 里 程 表 和 电子 监控 仪 的 数据 都 纳入 可 用 范围 。 


对 PAYD 系 统 的 担心 ， 主 要 围绕 保险 公司 可 能 会 将 用 户 数 据 出 售 或 
共 至 给 其 他 机 构 或 政 从 ， 还 有 右 古 这 些 系统 的 安全 性 。 此 外 ， 消 费 者 在 
怀疑 收费 不 合理 时 可 能 难以 对 保险 公司 账目 进行 审核 。 例 如 ， 电 子 监控 
系统 可 能 依赖 多 个 变量 ， 包 括 速 度 、 位 置 、 芍 驶 时 间 和 距离 以 及 芍 车 频 
率 等 ， 来 衡量 和 计算 保险 费用 。 但 是 每 个 变量 参与 计算 的 具体 权重 ， 可 
能 由 于 知识 产权 保护 的 茶 些 规定 使 用 户 无 法 对 目 己 保费 的 完整 性 进行 审 
碍 。 最 后 ， 系 统 可 能 并 无 法 全 面 反 映 轰 驶 者 的 鸭 车 习惯 。 一 个 偶尔 超速 
的 驾驶 者 ， 实 际 上 ， 可 能 比 一 个 在 车 流 中 总 是 减速 和 犹豫 的 要 驶 者 更 可 
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所 以 ， 尽 管 一 套 智能 感知 设备 和 算法 可 以 帮助 人 们 更 快 找到 丢失 的 
汽车 ， 也 可 能 帮助 降低 东 些 要 驶 者 的 保费 ， 但 它 无 颖 也 使 隐私 政策 和 法 
律 的 制定 变 得 更 加 复杂 ， 最 终 使 一 些 驾 驶 人 处 于 不 利 的 位 置 。 


无 法 回避 的 个 人 隐私 


每 年 都 有 更 多 的 人 目 愿 将 其 个 人 数据 在 线 分 享 ， 有 的 古 锻炼 路 线 ， 
有 的 是 不 经 意 的 想法 ， 有 的 是 自家 孩子 的 照片 。 尺 管 那些 在 线 分 享 个 人 
数据 的 人 们 ， 也 许 并 没有 过 多 考虑 他 们 数据 的 潜在 使 用 方式 ; 他 们 只 是 
分 至 数据 ， 并 且 在 大 多 数 情 况 下 ， 他 们 可 以 在 自己 希望 的 时 候 ， 从 公众 
的 视野 里 将 这 些 数 据 移 除 。 


但 是 ， 对 于 一 位 老者 或 是 一 个 精神 或 映 体 上 不 健全 的 人 来 说 ， 和 情况 
就 大 不 一 样 了 。 这 些 人 通常 对 应 用 在 他 们 映 上 监测 其 位 置 和 行为 的 数据 
感知 系统 没什么 话语 权 。 其 结果 束 是 ， 他 们 只 能 选择 相信 那些 看 护 他 们 
的 人 和 系统 。 


有 些 人 认为 对 老年 人 或 号 体 功 能 受 限 者 进行 监控 的 想法 存在 一 个 基 
本 的 道德 问题 ， 即 该 做 法 威胁 了 他 们 作为 人 的 基本 章 严 。 当 看 护 者 或 医 
生 认 为 一 个 人 需要 被 监护 和 追踪 时 ， 病 人 的 目 主 性 就 被 削弱 上 ， 其 基本 
公民 上 自由 的 权利 也 更 容易 被 忽视 。 


针对 这 些 基 本 的 人 里 自由 权利 ， 看 护 者 在 照看 病人 时 逾越 道德 窜 限 
的 情况 并 非 鲜 有 听闻 。 不 幸 的 是 ， 并 非 所 有 看 护 人 员 都 能 很 好 地 照顾 病 
人 。 在 美国 一 些 地 方 ， 看 护 者 虐待 病人 并 进行 经 济 剥 前 的 案例 越 来 越 普 
过。 这 促使 联邦 立法 者 们 制定 相关 法 采 ， 要 求 对 看 护 者 执行 更 为 严格 的 
背景 检查 等 措施 ， 以 减少 看 护 者 虐待 老年 人 的 事件 。 然 而 ， 由 于 大 约 
90% 的 施 层 看 护 人 都 是 病人 的 家 庭 成 员 ， 这 种 严格 的 背景 检查 措施 是 合 
会 有 效果 还 很 难 讲 ， 因 为 施 虐 者 可 能 完全 没有 作为 看 护 人 的 历史 记录 。 


与 此 同时 ， 技 术 的 进步 也 使 得 老年 人 和 里 体 功 能 受 限 者 可 以 独立 生 
活 得 更 入， 看 护 人 员 只 需要 远程 看 护 。 例 如 ， 通 用 电气 公司 开发 了 一 套 
产品 ， 利 用 无 处 不 在 的 感应 设备 可 以 精确 但 不 被 察 沉 地 识别 独居 老人 的 
行为 。 当 前 ， 简 单 的 行为 追踪 系统 更 为 普 过 ， 比 如 基于 GPS 的 “地 理 转 


栏 * 可 以 在 被 退 踪 人 离开 预定 空间 范围 时 间 看 护 者 发 送 警 报 。 这 球 产 品 
古 为 阿尔 次 海 默 症 患 者 所 设计 的 ， 但 也 可 以 用 于 儿童 和 青少年 的 看 护 。 


立法 者 应 该 尤其 注意 那些 可 能 助 结 为 虐 的 设备 ， 比 如 TAG 和 其 他 
一 些 更 复杂 的 感知 系统 。 它 们 会 在 一 个 被 施 虐 者 逃离 时 ， 立 即 同 看 护 者 
发 送 提示 消息 。 并 且 如 果 通 话 记 录 也 被 设备 或 软件 监控 着 的 话 ， 被 施 虐 
者 就 更 难 逃 脱 了 。 


在 东 种 程度 上 ， 与 施 诬 看 护 情形 相似 的 还 有 更 加 普 所 的 家 庭 骏 力 ， 
甚至 是 陌生 电子 追踪 。 在 汽车 上 偷偷 安装 追踪 设 备 已 经 是 较为 简单 的 
了 。 至 少 曾 经 在 一 个 案件 中 ， 家 许 骏 力 的 受害 者 起 诉 了 Foxtrax 汽 车 追踪 
设备 制造 商 ， 称 其 设备 在 一 次 攻击 行为 中 协助 了 施 虐 者 。 


警方 也 在 防范 家 寿 暴 力 中 使 用 个 人 GPS 奶 踪 设备 以 彼 之 道 ， 还 彼 之 


身 : 美国 有 越 来 越 多 的 州 开始 使 用 GPS 设备 监控 喘 负 限 制 令 的 嫌疑 人 ， 
这 种 方式 之 前 被 执法 机 关 用 于 监控 被 指控 实施 儿童 性 虐待 的 人 。 


尽管 我 们 都 知道 使 用 个 人 数据 的 设备 可 以 帮助 个 人 获得 更 高 效 的 生 
活 、 加 强 锻炼 或 是 戒除 烟 首 ， 这 些 设备 有 很 多 令 人 激动 的 用 武之 处 ， 但 
是 隐私 却 是 它们 无 法 回避 的 问题 。 研 究 人 员 试 图 设想 这 些 设备 运行 多 年 
后 的 情景 ， 以 便 更 加 深入 地 讨论 使 用 过 程 中 必然 会 出 现 的 问题 ， 还 有 随 
着 这 类 技术 进步 不 可 避免 会 产生 的 影响 。 然 而 ， 一 项 新 技术 中 关于 个 人 
隐私 或 技术 本 身 的 局 限 性 ， 比 如 基于 GPS 的 手机 应 用 或 是 基于 RFID 的 收 
费 蕊 片 ， 往 往 只 有 被 大 量 接纳 使 用 之 后 才 会 显现 并 开始 引发 问题 。 


针对 人 们 对 隐私 问题 的 担忧 ， 一 个 最 普通 的 方式 是 让 人 们 可 以 自由 
选择 进入 或 退出 菏 个 项 目 ， 使 用 或 停 用 茶 项 技术 。 然 而 有 些 时候 想 完全 
退出 行 不 通 。 因 此 ， 需 要 使 用 数据 采集 和 分 析 方 法 从 而 为 人 们 提供 多 种 
隐私 保护 选项 。 每 个 需要 用 户 进行 设置 的 隐私 选项 都 应 该 被 准确 解释 ， 
且 清 晰 易 懂 。 例 如 ,很 多 人 会 在 程序 询问 时 允许 手机 应 用 使 用 其 位 置信 
恩 ， 但 是 很 少 有 人 会 清楚 知道 这 些 位 置 数据 是 如 何 被 使 用 和 分 孚 的 。 


人 们 对 隐私 的 态度 也 在 不 断 变化 ， 在 脸谱 网 上 安心 发 布 自 己 照片 或 
者 在 推 竺 上 发 布 感想 的 人 们 都 会 同意 这 点 ， 公 共生 活 和 个 人 生活 之 间 的 
界限 已 经 日 益 模 糊 。 那 些 发 布 到 网 上 的 图 片 和 文字 可 以 被 任何 人 浏览 和 
搜索 到 。 那 些 即将 出 现 的 使 用 个 人 数据 的 新 技术 ， 无 论 它 们 的 数据 是 否 
公开 ， 都 极 有 可 能 利用 公众 认同 或 至 少 是 公众 度 等 以 减少 为 不 同 应 用 采 
集 和 处 理 个 人 数据 时 产生 的 摩 探 。 


这 些 个 人 层面 的 现实 挖掘 方式 激动 人 心 ， 它 们 用 数据 来 改变 人 们 的 
习惯 、 提 升 其 健康 状况 并 节省 支出 。 随 大 有 关 个 人 “大 数据 ”的 想法 日 荔 
普及 且 对 大 众 来 说 日 益 重 要 ， 政 策 制定 者 、 社 会 活动 家 和 技术 专家 们 天 
于 数据 所 有 权 和 东 些 基于 数据 的 产品 的 合法 性 讨论 将 会 越 来 越 多 。 现 
在 ， 是 时 候 来 认真 对 待 基 于 数据 的 产品 可 能 引发 的 问题 了 ， 正 如 我 们 之 
前 提 到 的 那些 。 如 果 能 以 正确 的 方式 来 使 用 这 些 产 品 ， 那 么 它们 在 未 来 
将 会 为 后 续 产 品 提 供 积 极 而 有 荔 的 范例 。 


侯 据 社区 中 人 们 的 行为 ， 并 把 它们 和 其 他 诸如 交通 、 空 气 污染 或 
其 他 环境 指标 数据 关联 起 来 的 工具 ， 对 于 关心 社区 的 积极 分 子 来 说 会 
人 人 为 了 改善 社区 ， 积 极 分 子 可 以 同 在 公共 空间 活动 的 人 们 提供 
E 气 质量 感应 器 ， 比 如 那些 在 公园 游玩 或 在 等 公交 车 的 人 。 如 果 这 些 
感应 器 检测 到 空气 污染 物 水 平 较 蜗 ， 那 么 就 可 以 肥 起 针对 当地 工厂 的 
请 愿 运动 ， 要 求 他 们 减少 污染 物 的 排放 。 
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正如 第 一 章 中 提 到 的 ， 记 录 单 独 的 个 人 信息 的 低 成 本 商业 方法 有 很 
多 。 筷 不 仅 方式 相当 简单 ， 而 且 和 被 记录 数据 的 人 们 在 茶 种 程度 上 可 以 控 
制 目 己 数据 的 使 用 方式 ， 以 及 怎样 使 这 些 数据 为 目 己 融 来 收益 。 但 当 人 
们 需要 从 小 规模 的 群体 中 采集 个 人 信息 时 ， 采 集 数据 提供 适当 奖励 以 获 
取 更 多 数据 的 复杂 性 会 提高 ， 即 使 这 些 人 效忠 于 同一 个 组 织 或 对 象 ， 或 
者 有 着 相同 的 目标 。 


用 来 进行 个 人 分 析 的 数据 ， et 
守 ， 因 此 即使 在 较 小 范围 内 分 圣 所 采集 的 个 人 信息 ， 也 会 让 人 们 觉得 隐 
ts 


群体 〈 一 般 超 过 1 万 人 ) 相 比 有 较 大 差别 ， 因 为 在 小 群体 中 采集 数据 ， 
其 个 人 的 吴 份 信息 与 其 数据 往往 是 明确 联系 在 一 起 的 ， 而 针对 大 群体 的 
数据 采集 ， 个 人 的 吴 份 信息 一 般 会 从 数据 上 被 剥离 ， 以 给 人 匿名 的 感 


ry, 
Tio 


当 涉 及 具体 的 数据 使 用 案例 ， 如 公司 或 社区 组 织 使 用 个 人 数据 ， 一 
些 特别 的 挑战 便 会 产生 。 当 共 人 的 上 司 或 其 他 权威 人 士 可 以 获得 具体 的 
个 人 信息 ， 人 们 会 本 能 地 排斥 。 同 样 ， 社 区 层面 的 数据 获取 也 很 困难 : 
城市 规划 师 、 政 客 或 社区 管理 员 等 需要 使 用 社区 层面 个 人 数据 的 人 ， 可 
能 无 法 获得 社区 中 每 个 人 的 文 持 ， 从 而 导致 上 只 有 部 分 人 目 愿 参与 。 


因此 ， 大 部 分 该 层面 上 的 数据 采集 ， 往 往 局 限于 参与 者 自愿 签 普 了 
数据 共享 协议 的 研究 项 目 。 因 此 ， 这 类 项 目 一 般 具 有 一 定 程 度 的 同 质 
性 ， 并 且 通 常 是 在 大 学 校园 里 开展 ， 因 为 这 里 的 人 一 般 具 有 共同 的 行为 
特征 。 例 如 第 一 章 中 提 到 的 ， 在 2003 年 开展 的 “现实 挖掘 ?项目 ， 其 中 的 
100 名 参与 者 就 全 部 都 是 厂 省 理工 学 院 的 学 生 。 


尽管 商业 领域 己 经 为 采集 小 群体 规模 的 行为 数据 做 了 一 些 答 试 ， 但 
收效 缓慢 。 有 一 个 例子 是 “智能 ”会议 标 识 卡 ， 这 些 智能 卡 基于 与 会 人 员 
的 社交 模式 通过 RFID 技 术 或 红外 线 感 应 器 来 分 辩 他 们 的 社交 网 络 。 这 
些 智能 卡 为 人 们 提供 了 共 孚 交流 信息 的 一 种 简单 方法 ， 也 使 会 议 组 织 方 
能 够 很 容易 地 得 知 每 个 分 会 场 的 参 会 情况 。 尽 管 这 些 乔 能 标识 卡 已 经 出 
现 了 很 多 年 ， 但 仍然 未 被 广泛 使 用 ， 一 部 分 原因 是 其 花费 较 高 ， 还 有 部 
分 原因 是 其 可 靠 性 及 应 用 范围 有 限 。 


在 工作 场所 ， 人 们 并 不 缺少 可 以 用 于 存储 和 挖掘 工作 人 员 数 据 的 软 
件 ， 包 括 生产 的 内 容 、 网 页 浏览 以 及 邮件 发 送 。 这 些 作 为 “知识 管理 系 
统 ”" 为 我 们 押 熟 知 的 软件 工具 ， 承 诡 通 过 允许 员工 更 便捷 地 获得 其 组 织 
内 部 信息 或 知识 的 办 法 ， 来 提高 员工 的 工作 效率 、 促 进 团 队 协 作 以 及 交 
流 。 然 而 知识 管理 工具 的 成 功 很 有 限 ， 因 为 将 它们 融入 一 个 公司 的 技术 
体系 及 其 团队 文化 是 很 困难 的 。“ 知 识 ” 通 常 是 被 男 外 附加 到 一 个 系统 上 


去 的 ， 但 只 有 经 过 这 种 组 合 ， 它 才 会 真正 对 菏 一 个 特别 的 项 目 产 生 用 
处 。 男 外 ， 知 识 管理 工具 的 维护 费用 较 高 ， 人 们 也 无 法 及 时 对 其 进行 衡 
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另 一 种 监控 工作 场所 的 类 型 是 通过 对 刷卡 钥匙 监视 器 ， 与 工作 相关 
的 手机 通话 《词汇 、 语 调 、 频 率 等 ) ， 以 及 监控 办 公 室 或 设施 附近 人 员 
移动 的 感应 右 进 行 分 析 。 但 是 这 些 工 具 几 乎 从 未 被 公司 采用 过 ， 唯 一 的 
例外 就 是 呼叫 中 心 ， 由 于 显而易见 的 原因 ， 其 通话 往往 是 被 监听 的 。 很 
少 有 公司 愿意 冒 着 政 远 员工 ， 甚 全 可 能 引发 法 律 诉 讼 的 风险 ， 来 尝试 通 
过 这 些 有 竺 证 实 的 方法 提高 工作 效率 。 


在 公司 和 工作 场所 之 外 ， 研 究 人 员 发 现 一 些 在 社区 层面 搜集 数据 的 
有 趣 原 因 。 一 些 在 大 学 校园 及 其 周边 开展 的 项 目 ， 依 靠 市 民 参 与 来 探索 
不 同 的 环境 层面 问题 ， 包 括 空 气 污染 、 垃 圾 堆放 、 道 路 状况 以 及 通勤 路 
径 等 。 这 些 数 据 采 集 是 简单 直接 的 ， 往 往 采 用 手机 作为 传感器 ， 但 其 挑 
战 在 于 ， 学 术 环 境 之 外 如 何 拓展 项 目 研究 范围 。 超 出 学 术 范 围 的 项 目 扩 
展 ， 其 中 的 一 个 关键 是 提供 一 个 最 合适 的 激励 办 法 ， 让 人 们 能 够 合理 地 
权衡 是 否 要 在 小 范围 内 共有 至 自 映 数据 以 从 中 获 利 ， 并 做 出 有 依据 的 决 
定 。 


也 许 最 显而易见 的 方法 是 同人 们 提供 乔 能 手机 的 同时 提供 流量 及 通 
话 套 餐 ， 以 换取 他 们 的 数据 。 几 年 前 ，IMMI 公 司 〈 纤 合 媒体 测量 公 
司 ) 束 成 功 地 通过 提供 智能 手机 的 方式 来 换取 用 户 癌 他 们 提供 日 党 生活 
中 的 声音 片段 。 该 公司 的 目标 是 通过 这 些 声 音 样 本 来 判断 用 户 正 在 消费 
的 媒体 类 型 ， 其 中 包括 广播 、 电 视 、 电 影 等 。 这 一 信息 可 以 用 来 分 析 特 
定 媒体 内 容 的 受 欢 迎 程度 ， 类 似 于 内 尔 森 的 媒体 调查 系统 。 值 得 注意 的 
和 是， 这 一 技术 并 不 记录 和 存储 个 人 对 话 或 原始 数据 。 尽 管 如 此 ， 这 样 的 
一 个 项 目 仍然 很 难 通过 大 学 伦理 委员 会 和 机 构 审查 委员 会 的 批准 ， 因 为 
如 采用 户 没 有 签 普 参 与 研究 同意 书 ， 那 么 他 们 的 语音 数据 就 不 能 被 采 
集 ， 而 语音 数据 采集 却 是 这 个 项 目 主题 中 不 可 避免 的 。 


本 章 探 索 了 当 研 究 人 员 和 研究 公司 试图 从 特定 群体 中 采集 非 匿 名 数 
据 时 ， 所 面临 的 撤 术 、 法 律 以 及 社会 挑 成 。 为 什么 有 些 方法 成 功 了 有 些 
却 没有 ? 以 及 在 这 个 尺度 上 的 “现实 挖掘 * 还 面临 着 怎样 的 机 遇 ? 


智能 标识 卡 


会 议和 公开 活动 是 采集 不 同 个 人 数据 的 绝 佳 场合 。 从 参与 人 注册 开 
始 ， 他 们 就 已 经 提供 了 一 定量 的 人 口 统计 学 类 型 的 个 人 基本 信息 ， 当 他 
们 出 席 这 些 会 议和 活动 的 时 候 ， 往 往 希 望 尽 可 能 多 并 尺 可 能 局 质量 地 与 
其 他 参与 者 进行 交流 。 一 个 可 以 退 踩 参 与 者 的 互动 情况 ， 并 且 人 至少 可 以 
提供 一 份 电子 联系 人 名 单 的 智能 会 议 标识 卡 ， 相 比 传统 的 握手 以 及 交换 
名 片 来 说 是 一 个 实用 的 改进 。 


不 同 的 智能 会 议 标识 卡 在 设计 、 功 能 以 及 其 采集 存储 数据 的 方式 上 
都 会 有 所 不 同 。 但 最 基本 的 ， 它 们 都 配 有 RFID 心 片 。 这 种 心 片 包含 一 
部 分 识别 信息 并 且 可 以 被 特定 的 识 读书 在 近 距 离 或 几米 范围 内 识别 。 
RFID 会 议 标 识 卡 最 常用 于 记录 会 议 的 参与 情况 以 及 参 会 人 员 的 用 餐 情 
况 。 但 有 时 也 会 用 来 记录 与 会 者 的 移动 路 径 ， 还 有 他 们 与 安装 在 不 同 广 
丙 的 展台 上 的 识 读 器 之 间 的 距离 。 这 些 标识 卡 将 识别 信息 传输 到 装 在 特 
定位 置 的 RFID 电 子 识 读 器 上 ， 这 些 识 读 器 按照 获取 信息 的 顺序 连接 远 
程 服务 器 上 的 应 用 程序 ， 用 以 分 析 这 些 数据 。 


这 些 RFID 标 识 卡 往往 和 传统 标识 卡 外 观 无 异 ， 轻 重 相差 无 几 ， 但 
其 价格 仍然 是 推广 的 障碍 。 尽 管制 造 RFID 必 所 的 花费 在 过 去 10 年 间 下 
降 了 不 少 ， 知 能 标识 卡 仍然 比 传统 标识 卡 昂 贯 。 像 微软 和 IBM (国际 障 
FANLAS ZB] ) 这 样 的 公司 曾 在 一 些 会 议 中 试验 性 地 使 用 RFID 标 识 卡 ， 
而 男 外 一 些 公 司 ， 如 安 联 科 技 (Alliance Tech) 和 会 议 策略 
(Convention Strategy) ， 也 曾 为 其 做 过 商业 化 推广 。 这 些 商 业 标 识 卡 
可 以 记录 人 们 观看 某 个 展览 或 在 某 个 展台 逗留 的 时 间 ， 还 可 以 在 一 些 拥 


有 茶 个 特殊 头衔 或 在 特定 公司 工作 的 重要 人 士 出 现在 识 读 器 范围 内 时 ， 
问 展台 处 的 工作 人 员 发 送 电子 邮件 和 文字 短信 。 


这 些 智能 标识 卡 的 一 个 主要 问题 是 使 人 们 缺乏 对 隐私 的 控制 。 一 旦 
佩戴 上 这 个 智能 标识 卡 ， 佩 戴 者 的 个 人 数据 就 会 一 直 其 露 于 RFID 识 读 
需 之 下 ， 除 非 他 用 馈 箱 之 类 的 导电 材料 物理 阻隔 信号 。 人 们 无 法 选择 一 
台 RFID 识 读 器 能 够 识别 什么 ， 也 无 法 决定 哪 一 台 识 读 需 能 够 识别 标识 
卡 的 事实 ， 造 成 了 这 样 一 种 情况 一 一 佩戴 者 缺乏 对 卡片 的 控制 并 可 能 会 
因此 不 愿意 佩戴 这 些 标识 卡 。 这 也 是 推广 此 类 技术 的 一 大 障碍 。 


电子 标识 卡 是 另外 一 类 智能 标识 卡 ， 它 采用 包括 RFID 在 内 的 多 种 
传感器 来 让 人 们 分 享 联系 方式 ， 并 且 可 以 与 他 们 自己 以 及 其 他 人 的 标识 
卡 互动 。 比 如 ， 这 些 标识 卡 可 以 带 有 一 个 简单 界面 ， 通 过 显示 屏 和 一 些 
按钮 来 让 人 们 在 设备 上 查看 数据 ， 回 答 问卷 调查 。 


这 种 互动 性 相对 于 简单 的 RFID 标 识 卡 有 一 个 巨大 的 优势 ， 因 为 人 
们 可 以 选择 他 想 传输 的 信息 类 型 ， 这 有 利于 提高 个 人 对 信息 的 擎 控 感 ， 
从 而 提高 其 分 享 数 据 的 心理 舒适 度 。 在 麻 省 理工 学 院 的 “现实 挖掘 ”项目 
中 ， 参 与 者 在 不 希望 手机 采集 他 们 的 行为 数据 的 时 候 ， 可 以 选择 “ 隐 
身 ”。 隐 里 模式 这 项 选择 可 以 降低 参与 者 对 于 针对 其 个 人 的 数据 采集 的 
担忧 ， 校 内 校外 与 他 们 交往 的 人 也 位 列 担忧 之 中 。 报 告 称 ， 参 与 者 对 于 
目 身 具备 掌控 数据 的 权利 而 感到 满意 ， 但 在 项 目 进行 过 程 中 很 少 有 参与 
者 真正 激活 了 隐身 模式 。 


FAS CL) 相对 复杂 ， 装 载 了 传感器 的 电子 标识 卡 比 RFID 标 
识 卡 更 贯 ， 从 而 阻碍 了 前 者 的 广泛 应 用 。 另 外 ， 电 子 标识 卡 更 重 ， 这 使 
得 它们 不 适合 全 天 佩戴 ， 也 不 适合 日 程 比较 长 的 会 议 。 


在 这 个 领域 中 ， 一 家 著名 公司 是 拱 省 理工 学 院 的 生生 企业 nTag。 
2009 年 3 月 安 联 科技 收购 nTag， 并 雇用 了 其 核心 员工 ， 现 在 安 联 科技 是 
nTag 技 术 的 独家 供应 丙 。 除 了 众多 其 他 功能 之 外 ，nTag 标 识 卡 还 可 以 促 


进 佩戴 者 与 其 他 人 交谈 ， 交 换 电子 名 片 ， 与 工作 人 员 、 演 讲 者 以 及 其 他 
参加 者 更 容易 地 交流 。 与 RFID 标 识 卡 相似 ，nTag 标 识 卡 同样 可 以 让 会 
议 组 织 者 监控 会 议 与 展台 的 参与 情况 。 


现 如 今 ， 有 越 来 越 多 的 人 都 在 使 用 具备 很 多 标识 卡 所 提供 的 功能 的 
智能 手机 。 我 们 现在 尚 不 清楚 ， 这 些 标识 卡 公司 将 怎样 在 这 样 的 时 代 中 
经 营 下 去 。 雇 用 一 个 软件 开发 人 员 来 为 主流 的 智能 手机 操作 系统 开发 应 
用 程序 ， 以 便 与 会 人 员 使 用 自己 的 个 人 设备 来 实现 nTag 标 识 卡 所 具备 的 
功能 ， 这 可 能 是 很 划算 的 选择 。 


科学 地 杂 紧 你 的 员工 


凭借 数据 挖掘 软件 而 闻名 的 公司 ， 例 如 甲骨 文 和 IBM 和 等， 多 年 来 一 
直 在 运用 相关 技术 对 其 员工 所 产生 的 万 亿 级 别 数 据 进 行 分 析 。 这 类 被 称 
为 “知识 管理 ”的 数据 挖掘 项 目 ， 其 基本 目标 包括 规范 交易 流程 、 开 展 高 
效 的 营销 活动 、 识 别 其 诈 行 为 ， 以 及 捕捉 律师 事务 所 立 条 所 需 的 “电子 
证 据 ”(eDiscovery) 。 最 终 目标 是 通过 提高 员工 工作 效率 ， 或 者 更 为 理 
想 的 一 一 提高 员工 满意 度 来 改善 工作 环境 。 


Tacit 软 件 公 司 是 这 一 领域 中 的 秋 臣 ， 该 公司 成 立 于 1997 年 ， 并 在 
2008 年 被 甲骨 文 收购 。Tacit 公 司 开发 的 软件 “第 四 章 中 将 会 详细 论述 ) 
可 以 分 析 电 子 邮件 交流 、 博 客 和 维基 百科 词 条 ， 来 确定 人 们 的 兴趣 和 专 
长 。 这 一 软件 用 在 大 公司 中 可 以 帮助 员工 相互 认识 ， 从 而 在 解决 坏 手 问 
题 时 可 以 相互 帮助 。 洛 殉 硕 德 : 马 丁 、 话 斯 洛 普 . 格 鲁 门 ， 以 及 葛 兰 素 史 
区 等 公司 都 采用 这 一 软件 。 


另外 ，Declara 公 司 目 前 作为 一 个 所 谓 的 虚拟 咨询 协作 平台 ， 其 软件 
可 以 创建 一 个 同 机 构 人 员 的 社交 网 络 ， 并 且 通 过 他 们 所 产生 的 数据 为 搜 
索 者 匹配 最 佳 信息 。 


Tacit 和 Declara 公 司 的 技术 具有 蜗 度 的 自主 知识 产权 ， 因 此 可 能 价格 
较 高 ， 但 还 有 其 他 较为 便宜 的 开源 选择 。 比 如 OpenKM 兼 容 市 面 上 主流 
操作 系统 ， 并 且 文 件 可 以 存储 于 诸如 甲骨 文 和 MySQL 一 类 的 本 地 文件 
系统 或 数据 库 管 理 系统 。 此 外 ， 还 有 大 量 处 理 知识 管理 各 个 方面 工作 的 
开源 软件 工具 ， 举 几 个 例子 来 说 ， 比 如 赛 门 铁 殉 公司 的 KAON 框 架 、 
Exteca、Haystack 和 Kowari。 


员工 创造 的 数据 除了 显示 他 们 的 专业 知识 和 兴趣 之 外 ， 还 能 反映 同 
一 机 构 中 工作 人 员 的 效率 。 在 过 去 的 几 年 间 ， 许 多 公司 的 人 力 资 源 部 门 
都 已 经 接受 了 使 用 员工 创造 的 数据 来 评估 员工 工作 效率 的 方法 。 虽 然 这 
仍然 是 一 种 新 尝试 ， 但 它 使 企业 管理 者 能 够 量化 评估 一 个 员工 的 工作 能 
力 以 及 他 在 公司 的 员工 网 络 中 所 扮演 的 角色 和 产生 的 效力 。 


Cataphora 公 司 现在 借助 他 们 之 前 开发 的 ， 用 来 依法 证 实 一 些 公司 过 
去 曾经 犯 过 欺诈 罪 的 搁 术 ， 来 帮助 现在 的 公司 判断 他 们 的 员工 本 里 是 否 
涉嫌 犯 菲 。 该 软件 监控 员工 的 电子 事务 ， 包 括 电 子 邮 件 、 发 送 和 接收 的 
附件 、 即 时 消息 以 及 日 程 安 排 。 该 软件 负责 找 出 利 规 交流 模式 ， 并 根据 
该 模式 找 出 例外 情况 ， 比 如 签字 时 使 用 与 平时 不 同 的 语言 ， 有 时 候 就 是 
作 浆 的 一 种 信号 。 这 个 软件 可 以 友 据 员工 之 间 的 小 轿子， 给 人 力 资源 专 
家 提供 潜在 的 线索 ， 使 其 能 够 分 辨 哪些 人 工作 闫 出 能 力 强 ， 哪 些 人 工作 
产 出 能 力 弱 。 除 了 提供 企业 级 软件 之 外 ，Cataphora 公 司 也 为 员工 提供 一 
份 资 明 书 和 一 个 商业 版 本 软件 ， 这 样 员工 就 可 以 了 解 他 们 的 老板 会 怎样 
人 破译 他 的 个 人 数据 。 


尽管 对 于 一 个 在 办 公 室 工 作 人 员 来 说 ， 发 送 和 接收 电子 交流 信息 是 
才 其 他 


其 一 天 工作 中 的 重要 组 成 部 分 ， 其 工作 效率 和 社区 效果 也 可 以 通过 
指标 来 观察 。 例 如 电子 ID 卡 的 记录 可 以 显示 一 个 人 一 整 天 的 移动 轨迹 。 


另外 ， 文 字 短 信 、 语 音 通话 ， 还 有 通话 记录 也 可 以 用 于 评估 员工 的 
社交 网 络 及 其 行为 。 众 所 周知 ， 客 户 服务 中 心 会 通过 监听 语音 通话 来 答 
试 优 化 雇员 与 客户 之 间 的 互动 。 现 在 的 软件 可 以 分 析 通 话 内 容 ， 让 公司 


了 解 顾客 通话 时 的 情绪 。Verint 系 统 有 限 公司 集成 了 语音 分 机、 电子 邮 
件 文本 、 即 时 信息 以 及 调查 的 反 饿 ， 以 期 更 全 面 地 了 解 其 用 户 对 公司 的 


yah ze. 
满意 度 。 


除了 使 用 客户 服务 中 心 的 行业 以 外 ， 雇 主 监听 员工 的 语音 通话 的 情 
况 其 实 并 不 第 见 。 何 况 ， 想 要 了 解 一 个 公司 员工 的 社交 状况 ， 并 不 需要 
完整 地 记录 他 们 的 语音 通话 ， 对 于 鉴别 员工 个 人 或 团体 的 工作 能 力 来 
说 ， 也 没有 必要 这 么 做 。 分 析 语 音 特性 ， 比 如 从 上 一 轮 谈话 转换 到 下 一 
轮 的 风格 以 及 面对面 谈话 的 速度 ， 可 以 用 于 确定 社区 网 络 的 结构 。 将 这 
类 研究 拓展 到 语音 通话 上 ， 可 以 免除 对 整个 通话 进行 录音 的 必要 ， 这 不 
仅 能 最 大 限度 地 减少 隐私 方面 的 隐忧 ， 还 有 一 些 额外 的 好 处 。 


在 这 个 领域 中 对 于 合法 性 的 担忧 是 合理 的 ， 特 别 是 现行 的 法 律 并 不 
完善 ， 缺 乏 切 实 保护 雇主 或 被 尾 佣 者 的 条 球 。 尺 管 对 所 有 与 商业 相关 的 
通话 进行 录音 都 是 合法 的 ， 但 在 大 多 数 时 候 这 种 监控 需要 事先 告 之 通话 
双方 。 个 人 通话 ， 在 被 认定 为 私人 通话 的 情况 下 ， 是 不 可 以 被 监控 的 。 
然而 ， 如 果 公 司 没 有 明确 规定 工作 时 不 可 以 进行 个 人 通话 ， 那 么 雇员 的 
个 人 通话 束 有 被 监控 的 风险 。 


2010 年 6 月 ， 美 国 最 高 法 院 在 安大略 市 诉 杰 夫 : 库 昂 一 案 〈 美 国 最 高 
法 院 判例 汇编 索引 号 : 130 S.Ct. 2619, 560 U.S.) 中 判定 ， 在 工作 相关 的 
背景 下 对 警 局 分 配给 警 员 呼 机 上 的 信息 实施 搜查 是 合法 的 。 在 这 个 案件 
中 ， 城 市 管理 部 门 试图 通过 对 日 常 使 用 情况 的 调查 来 决定 是 否 修改 与 寻 
呼 机 提供 商 签订 的 无 线 合 约 ， 并 因此 获取 了 一 份 杰 夫 : 库 昂 的 里 面 含有 
大 量 淫秽 信息 的 寻呼机 信息 副本 。 这 次 判决 的 依据 是 美国 宪法 第 四 修正 
案 中 关于 政府 搜查 公务 员 的 电子 通信 记录 的 规定 。 人 尽管 这 个 案件 和 此 次 
判决 的 结果 可 能 对 公务 员 的 隐私 空间 界定 产生 了 一 定 的 影响 ， 但 当 雇 主 
是 私营 业主 时 ， 此 类 案件 在 有 关 隐 私 权 的 问题 上 仍然 没有 定论 。 


对 于 雇员 来 说 ， 雇 主 对 他 们 的 茶 些 监视 如 果 和 一 定 的 利益 或 者 加 新 
挂钩 ， 可 能 会 更 好 接受 一 些 。 对 于 这 样 的 系统 ， 一 个 重要 的 要 素 是 透 


明 : 采集 和 分 析 数 据 的 方法 要 解释 清楚 ， 得 出 的 结果 要 给 予 员 工 反 对 和 
申诉 的 权利 。 比 如 第 二 章 中 提 到 的 健康 激励 系统 ， 一 个 合适 的 员工 监控 
系统 的 输出 结果 应 该 只 用 于 激励 员工 而 不 是 用 于 处 如 他 们 。 


然而 ， 知 易 行 难 ， 职 位 的 上 升 和 工资 上 调 等 方面 的 不 一 致 经 常 是 公 
司 中 争论 的 焦点 ， 远 比 每 个 员工 卫生 保健 费用 的 差别 更 受 关注 。 另 外 ， 
研究 这 些 员 工 数 据 远 比 健康 激励 系统 所 用 的 直截了当 的 方法 要 复杂 得 
多 。 例 如 ， 健 康 激 励 系统 可 以 根据 一 个 人 每 个 月 所 走 的 步 数 ， 相 应 地 降 
低 一 定量 的 健康 保险 费用 。 一 个 最 好 的 提高 员工 工作 效率 的 方法 是 提高 
他 们 对 工作 空间 的 满意 度 ， 但 如 果 雇 主 侵犯 了 员工 的 权利 和 隐私 ， 则 所 
有 的 努力 部 有 可 能 适得其反 。 


建设 更 闫 好 社区 


当 从 社区 层面 考虑 采集 数据 ， 则 会 遇 上 完全 不 同 的 挑战 和 机 过 。 这 
些 项 目 一 般 是 基于 具有 一 定 同 质 性 的 群体 来 开展 的 ， 比 如 大 学 生 和 教 
授 ， 这 样 的 数据 采集 项 目 ， 往 往 在 地 理 范围 上 被 限制 在 大 学 的 附近 。 然 
而 ， 这 些 项 目 提出 了 可 以 提升 参与 度 的 潜在 应 用 和 激励 方案 。 在 一 些 项 
目 中 ， 研 究 人 员 以 及 一 些 公司 利用 人 们 想 要 创造 出 一 个 更 宜 居 的 社区 的 
愿望 ， 来 苑 服 参与 者 不 情愿 分 享 个 人 信息 的 情况 ， 这 个 办 法 在 一 些 情况 
中 还 是 很 有 效 的 。 


英特尔 和 加 利 福 尼 亚 大 学 的 研究 实验 室 探 索 了 一 种 新 的 方法 ， 根 据 
便携 的 个 人 空气 质量 传感器 追踪 到 的 数据 来 绘制 污染 状况 分 布 图 。 这 一 
项 目的 名 称 叫 作 * 第 识 ”， 通 过 个 人 和 集聚 的 人 群 的 曝光 来 采集 数据 。 以 
迎合 人 们 泡 望 改善 目 身 健康 状况 以 及 周边 环境 愿望 的 这 样 一 种 方式 ， 研 
完 人 员 说 服 了 参与 者 通过 自己 的 手机 分 至 位 置信 息 ， 以 及 分 诗 通 过 穿戴 
式 传 感 设备 退 踊 的 一 氧化 矶 、 毛 氧化 合 物 、 吴 氧 层 以 及 光线 、 瘟 上 度 、 湿 
度 和 空间 方位 等 一 系列 信息 。 这 种 采集 的 结果 可 以 帮助 社会 活动 家 动员 


社会 群体 有 的 放 和 天 地 行动 起 来 。 


但 是 ， 要 将 这 样 的 应 用 推广 到 更 多 的 人 和 群 可 能 还 需要 几 年 时 间 。 主 
要 的 挑战 是 ， 将 大 多 数 环 境 传 感 占 集成 在 手机 上 这 样 的 做 法 缺乏 大 规模 
市 场 需求 ， 因 此 很 难 畅 销 。 力 外 还 有 个 挑战 是 ， 由 于 玉 集 数据 的 手机 不 
同 ， 如 何 保持 数据 的 “清洁 ?也 是 一 个 问题 。 因 此 ， 在 这 类 数据 采集 上 的 
商业 答 试 ， 最 可 能 需要 的 是 ， 使 用 不 贯 、 不 引 人 注 目 、 带 有 蓝牙 功能 且 
可 以 和 用 户 移动 设备 连接 的 外 部 传感器 。 


由 德 博 拉 : 埃 斯 特 林 主 持 的 一 些 在 UCLA 《加州 大 学 洛杉矶 分 校 ) 开 
展 的 研究 项 目 ， 探 索 了 这 类 只 通过 手机 在 社区 层面 采集 数据 的 方法 。 恰 
好 ， 这 些 装 有 摄像 头 和 GPS 的 手机 非常 有 可 能 为 改善 社区 做 得 更 多 。 实 
际 上 ， 把 UCLA 的 一 些 项 目 参 数 进 行 整合 的 想法 ， 在 众多 创业 公司 都 在 
开发 类 似 的 手机 应 用 的 当下 ， 正 好 迎合 了 大 众 的 需要 。 


其 中 有 一 个 叫 作 “个 人 环境 影响 报告 ?的 项 目 ， 利 用 安全 地 定期 上 传 
到 远程 服务 器 上 的 数据 同人 们 提供 环境 影响 和 环境 暴露 水 平 的 信息 “三 
。 通 过 分 析 用 户 的 位 置 轨迹 ， 还 有 加 利 福 尼 亚 州 数 以 和 干 计 的 社区 的 天 气 
状况 、 估 算 交 通 模式 等 数据 ， 系 统 可 以 生成 一 份 报告 ， 佑 算 参 与 者 骏 露 
在 什么 等 级 的 环境 烟 筋 之 中 ， 以 及 他 经 过 了 多 少 家 快餐 馆 。 它 还 可 以 通 
过 参与 者 所 开 的 车 ， 来 评估 一 个 人 的 矶 影响 以 及 他 对 学 校 和 医院 这 类 敏 
感 地 点 的 影 啊 。 


另外 一 个 UCLA 的 项 目 让 参与 者 通过 手机 报告 大 学 校园 里 未 被 归 置 
的 垃圾 的 情况 ， 该 项 目 说 明了 人们 在 社区 层面 分 至 数据 的 潜在 好 处 。 在 
这 个 项 目 中 ， 大 学 生 被 或 励 将 校园 中 垃圾 棚 里 的 内 容 用 手机 拍照 ， 以 便 
确定 回收 垃圾 桶 应 该 如 何 布 置 才能 获得 最 高 的 使 用 效率 。 


手机 在 UCLA 还 被 用 来 寻找 更 好 的 目 行车 通勤 路 径 。 一 个 名 为 
Biketastic 的 项 目 ， 通 过 GPS 轨 迹 采 集 骑 车 人 路 径 ， 以 及 通过 加 速 器 的 数 
据 来 记录 路 面 粗糙 程度 并 使 用 声音 数据 来 帮助 判断 交通 状况 或 道路 施工 


情况 。 当 和 空气 质量 、 时 间 敏 感 的 交通 数据 以 及 交通 事故 等 其 他 数据 集 
结合 起 来 时 ， 和 人们 惑 可 以 全 面 、 清 晰 地 了 解 一 条 自行 车 通勤 路 径 的 情况 
To 


+ ~ 
声 景 监视 


正如 许多 UCLA 的 项 目 所 证 实 的 那样 ， 手 机 上 大 量 的 传感器 使 其 非 
常 适合 作为 环境 监测 终端 。 但 一 份 简 单 、 连 续 地 采集 所 获得 的 音频 文件 
同样 可 以 很 有 用 。2010 年 ，Arbitron 股 份 有 限 公司 取得 了 IMMI 的 技术 文 
件 、 专 利 权 以 及 IMMI 的 商标 名 称 并 将 其 改名 为 Audience Measurement 
Technologies。IMMI 使 用 周围 环境 的 音频 来 鉴别 人 们 正在 使 用 的 媒体 类 
型 。IMMI 直 接 与 尼尔森 媒体 研究 公司 苋 争 ， 试 图 了 解 所 有 形式 的 媒 
体 ， 从 电影 、 收 音 机 、 游 戏 到 MP3 一 种 音乐 文件 播放 器 〉、 电 视 ， 以 
及 网 络 。 这 一 技术 通过 手机 或 个 人 电脑 上 的 录音 工具 来 实现 。 该 录音 工 
有 具 在 一 分 钟 内 数 次 记录 声音 片段 ， 并 与 声音 数据 库 中 的 信号 进行 对 比 。 
该 技术 不 需要 用 户 的 主观 参与 ， 因 此 可 以 提供 一 个 无 偏见 的 个 人 声 景 
本 。 它 可 以 在 用 户 注 册 使 用 该 服务 时 ， 交 叉 引 用 个 人 信息 来 提供 个 人 听 
力 习 惯 的 实时 报告 。 


已 经 有 超过 一 万 人 同意 使 用 IMMI 的 技术 。 尽 管 这 一 群体 规模 使 得 
IMMI 的 技术 超出 了 本 章 小 规模 群体 的 范畴 ， 但 其 客户 端 采 集 数据 的 基 
本 方法 ， 以 及 它 所 采集 的 数据 并 不 是 关联 到 匿名 用 户 或 是 茶 个 群体 的 平 
均值 ， 而 是 关联 到 一 个 可 识别 的 个 人 这 个 事实 ， 使 得 它 很 适合 用 于 在 相 
对 小 规模 的 群体 中 采集 数据 。 


当 一 个 人 决定 使 用 IMMI 的 技术 时 ， 他 需要 将 其 下 载 至 自己 的 手机 
或 个 人 电脑 上 ， 或 接受 IMMI 提 供 的 预 效 该 数据 采集 技术 的 智能 手机 。 
每 隔 几 分 钟 ， 他 的 设备 会 采集 一 份 音频 样本 ， 紧 接 独 音频 会 被 转换 为 数 
字 信 号 ， 之 后 再 传输 至 该 公司 的 服务 器 。IMMI 公 司 的 服务 器 根 据 监控 


的 各 类 媒体 ， 如 商业 广告 、 预 告 片 、 电 影 和 音乐 ， 计 算 形 成 各 种 媒体 的 
目标 内 容 文件 ， 如 果 手 机 传 来 的 数字 信和 号 与 IMMI 公 司 服务 露 中 的 信和 号 
相符 ， 用 户 所 使 用 的 媒体 就 可 以 被 识别 出 来 。 信 号 匹配 的 过 程 只 需要 几 
秒 钟 。 


在 个 人 隐私 方面 ， 该 公司 宣称 ， 语 音 通 话 以 及 其 他 非 媒体 的 声音 会 
被 过 涯 抒 。 因 为 音频 信号 会 立刻 转换 为 数字 信和 号， 而 这 些 数字 信和 号 是 已 
经 与 预先 识别 过 的 媒体 信号 进行 匹配 过 的 ， 因 此 该 公司 没有 理由 也 不 共 
备 分 析 其 他 音频 的 方法 ， 这 些 不 被 识别 的 音频 包括 对 话 以 及 街道 的 声音 
等 。 而 且 在 这 一 技术 的 具体 应 用 中 还 有 一 个 关键 点 : IMMI 同 接受 预 装 
软件 的 手机 用 户 提供 设备 和 服务 补贴 。 这 人 至少 对 于 一 部 分 人 来 说 ， 足 够 
消除 他 们 对 于 该 技术 可 能 监听 自己 的 生活 的 顾虑 了 。 


IMMI 的 技术 现在 属于 Arbitron 公 司 ， 后 者 研发 了 便携 式 人 员 收 视 测 
量 仪 ， 该 设备 只 有 一 张 纸 的 大 小 ， 用 于 监测 电视 广播 信号 中 人 耳 不 可 周 
的 音调 。 当 这 些 信号 被 监测 到 时 ， 它 们 会 被 无 线 传 输 到 Arbitron 的 服务 
髓 。 这 种 便携 式 人 员 收 视 测 量 仪 现 在 已 经 在 加 拿 大 、 冰 岛 、 挪 威 、 瑞 
典 、 丹 麦 、 比 利 时 和 哈 陡 死 斯 坦 等 国家 得 到 应 用 ， 而 其 音频 编码 技术 则 
在 新 加 坡 获得 了 使 用 许可 。 


对 小 规模 群体 的 数据 采集 来 次， 最 大 挑战 在 于 寻找 合适 的 激励 方式 
囊 励 人 们 参与 ， 特 别 是 在 个 人 能 够 轻易 地 直接 获得 自己 所 产生 的 数据 的 
情况 下 。 智 能 会 议 标识 卡 的 发 展 可 能 受制 于 经 济 成 本 ， 但 工作 场所 和 社 
区 具有 使 用 “现实 挖掘 技术 的 可 能 性 ， 通 过 这 些 技术 可 以 更 好 地 把 握 人 
们 的 实际 工作 和 日 常 表现 。 而 且 ， 如 果 在 社区 中 分 享 数据 的 好 处 可 以 被 
高 效 地 交流 和 展示 ， 很 有 可 能 会 有 更 多 的 人 愿意 接受 东 些 特定 形式 的 数 


据 共 至。 


IMMI 仿 然 及 现 了 让 人 们 分 至 他 们 所 处 环境 的 私人 音频 的 方法 : 他 
们 提供 免费 的 智能 手机 ， 并 承 诡 私人 对 话 会 被 排除 在 数据 采集 外 。 但 实 
际 上 ， 人 们 可 能 需要 对 这 种 方式 的 成 本 效益 进行 更 深入 的 研究 。 特 别 


是 ， 曾 有 一 个 研究 发 现 ， 学 生 们 为 了 获得 平均 约 10 瑞 镑 的 补贴 而 愿意 分 
译 上 自己 的 位 置信 息 ( 通 过 他 们 的 手机 〉。 经 常 离开 学 校 的 学 生 认 为 他 们 
的 隐私 更 有 价值 ， 相 比 那 些 只 在 学 校 附近 活动 的 学 生 ， 他 们 索要 的 补贴 
更 高 。 这 一 研究 表明 ， 人 们 确实 会 为 目 己 的 位 置 数据 估价 ， 而 且 这 一 价 
值 的 高 低 取 决 于 一 些 特定 的 因素 ， 比 如 移动 性 。 


研究 人 员 和 商人 需要 更 加 重视 个 人 数据 的 价值 并 做 出 相应 的 补偿 。 
考虑 到 人 们 固有 的 隐私 顾虑， 开展 研究 的 群体 规模 是 个 微妙 的 因素 ， 但 
合适 的 规模 也 可 以 让 大 量 应 用 获取 负责 任 的 参与 者 。 


1. 环境 暴露 水 平 是 指 人 群 接触 茶 个 环境 因素 的 浓度 或 剂量 。 一 一 译 者 注 


第 四 章 
数据 价值 如 何 落地 ? 


正如 第 二 章 中 提 到 的 ， 目 前 已 有 很 多 方法 可 以 利用 个 人 数据 来 开发 
系统 和 工具 ， 以 帮助 个 人 实现 目 己 的 目标 ， 或 过 上 更 健康 的 生活 。 这 一 
章 我 们 将 介绍 小 规模 群体 的 数据 是 如 何 被 用 于 提升 个 人 的 工作 效率 、 改 
善 其 健康 状况 ， 促 进 更 多 有 效 的 群体 互动 ， 以 及 建设 更 健康 更 宜 居 的 社 
区 的 。 利 用 小 规模 群体 数据 ， 工 程 师 可 以 更 简单 地 识别 有 意义 的 或 偶然 
的 人 际 关 系 、 事 件 以 及 人 们 所 处 的 环境 ， 这 些 可 以 帮助 公司 管理 者 、 积 
极 的 市 民 、 健 康 产 品 提供 商 以 及 当地 政府 官员 更 好 地 决策 。 


在 这 个 规模 上 ， 社 交 网 络 中 的 联盟 和 层级 划分 现象 就 变 得 十 分 清 
晰 ， 而 且 有 助 于 人 们 理解 群体 行为 。 但 这 些 观察 只 有 在 涉及 有 具体 行动 时 
其 关联 性 才 最 强 ， 才 有 用 ， 比 如 证 一 个 机 构 运行 得 更 平稳 ， 或 者 让 一 个 
社区 变 得 更 宜 居 。 因 此 ， 不 把 它 限制 在 观察 科学 的 范畴 中 这 一 后 很 重 
要 ， 设 计 更 好 的 机 构 和 社区 从 根本 上 来 说 还 是 要 落实 到 实践 。 当 然 ， 设 
计 一 个 能 够 合理 激励 人 们 分 享 数据 的 系统 会 是 一 个 挑战 ， 它 需要 能 够 让 
人 们 放心 地 分 享 目 己 产生 的 数据 ， 而 且 在 特定 的 人 群 能 够 获取 这 些 数据 
时 ， 人 们 不 会 感受 到 威胁 。 


让 人 局 兴 的 是 ， 很 多 公司 和 研究 人 员 都 在 开发 这 样 的 应 用 。 例 如 第 
三 章 中 提 到 的 Tacit 公 司 开发 的 知识 中 介 系 统 ， 这 种 系统 分 析 员 工 的 工作 
和 沟通 行为 ， 帮 助 他 们 与 同事 建立 新 的 联系 。 通 过 一 个 叫 作 Serendipity 
的 手机 应 用 ， 它 用 相似 的 原则 可 以 在 正式 会 议 或 私人 约会 的 情境 中 帮助 
人 们 相互 结识 。 但 关键 是 要 保障 每 个 人 的 隐私 ， 这 些 系统 只 能 使 人 们 更 
容易 结识 新 人 ， 而 不 是 以 个 人 的 隐私 或 安全 为 代价 ， 强 迫 人 们 相互 结 
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从 工作 场所 的 数据 转 同 社区 层面 的 数据 ， 可 以 从 相对 小 规模 的 关心 
改善 社区 层面 生活 质量 的 当地 居民 入 手 ， 利 用 他 们 提供 的 数据 。 在 第 三 
章 中 我 们 也 介绍 过 ，UCLA 开 展 了 一 系列 关于 参与 式 感知 的 项 目 ， 让 市 
民 能 够 监控 空气 污染 水 平 ， 比 如 一 个 可 以 标示 出 哪些 道路 对 于 哮喘 患者 
来 说 更 为 安全 的 应 用 。 


但 更 有 意思 的 是 那些 已 经 从 实验 室 走出 来 ， 投 入 商业 应 用 ， 使 用 的 
规模 扩张 到 了 数 千 人 的 参与 感知 方式 的 项 目 。 例 如 纽约 大 学 衍生 公司 的 
Noah 项 目 ， 让 市 民 科 学 家 为 他 们 所 观察 到 的 生物 体 拍摄 带 有 地 理 标 签 和 
时 间 戳 记 的 照片 并 对 其 做 笔记 ， 经 过 一 段 时 间 的 积累 ， 就 可 以 为 当地 生 
态 系统 的 健康 状况 提供 简况 信息 。 另 外 一 个 手机 应 用 CitySourced， 则 是 
让 人 们 将 招 摄 到 的 城市 衰败 区 域 的 照 厂 发 送 到 各 上 自 的 市 政 厅 ， 这 些 照片 
同样 带 有 地 理 标 签 和 时 间 戳 记 。CitySourced 是 一 系列 可 用 ， 且 已 经 被 整 
合 到 城市 工作 流程 系统 和 城市 311.= ”热线 〈 非 紧急 事件 ) 中 的 应 用 之 
一 ， 人 们 可 以 直接 把 目 己 采集 到 的 数据 分 享 给 能 够 解决 该 问题 的 政府 工 
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对 于 社区 来 说 ， 如 果 没 有 被 该 系统 成 功 激 励 而 愿意 提供 潜在 敏感 信 
恩 的 这 部 分 大 民主 动 提供 潜在 的 有 价值 信息 ， 这 些 参 与 式 感知 系统 束 没 
有 价值 。 随 着 这 类 数据 分 译 油 励 机 制 被 日 益 优 化 ， 这 样 的 系统 会 在 塑造 
和 维持 我 们 工作 、 生 活 的 场所 的 行动 中 扮演 着 越 来 越 重 要 的 角色 。 


本 章 关 注 的 是 这 些 本 地 应 用 程序 的 潜能 ， 包 括 让 设计 者 说 服 人 们 参 
与 其 中 ， 并 保障 他 们 隐私 的 一 些 重要 技术 。 在 一 些 采 例 中 ， 散 励 人 们 参 
与 的 动机 是 明显 提高 的 工作 效率 以 及 团队 合作 效率 ， 并 且 提 供给 第 三 方 
的 私人 数据 可 以 使 用 。 在 另 一 些 案 例 中 ， 设 计 者 将 博弈 论 的 元 系 融 合 到 
他 们 的 应 用 中 ， 让 人 们 在 参与 中 获得 成 就 感 。 当 参与 其 中 的 好 处 显 而 易 
见 ， 而 隐私 又 能 很 好 地 被 保护 时 ， 和 人 们 就 变 得 更 加 愿意 分 至 个 人 数据 ， 


从 而 使 他 们 的 工作 空间 和 社区 对 自己 、 对 同事 、 对 附近 居民 来 说 都 变 得 
更 好 。 


社交 网 络 的 介入 


Tacit 是 一 家 将 自己 的 软件 标榜 为 知识 中 介 系 统 的 公司 ， 该 公司 的 软 
件 从 员工 发 送出 的 电子 邮件 中 搜集 私人 细节 。 这 些 细节 ， 包 括 收 件 人 信 
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知识 以 及 兴趣 。 因 为 Tacit 使 用 的 这 种 数据 采集 方法 会 让 员工 反感 ， 所 以 
该 软件 是 基于 严格 并 且 透 明 的 隐私 控制 规则 来 设计 的 。 所 有 信息 都 被 加 
密 ， 这 意味 着 公司 内 的 任何 人 都 不 可 能 看 到 关于 员工 个 人 的 兴趣 以 及 社 
会 联系 的 分 析 ， 即 使 是 技术 总 监 和 CEO 也 不 例外 。 同 样 ，Tacit 公 司 的 其 
他 任何 人 也 都 无 法 获取 这 些 信息 。 仅 在 有 法 院 指令 的 情况 下 ，Tacit 公 司 
才 会 公布 这 些 敏感 数据 ， 并 且 想 要 获取 这 些 数据 需要 Tacit 公 司 以 及 使 用 
该 系统 的 公司 同时 提供 密 钥 。 


那么 ， 这 具体 是 如 何 操作 的 呢 ? 该 软件 只 有 在 所 有 参与 方 都 授权 的 
情况 下 ， 才 能 显示 关系 信息 。 比 如 ， 假 设 罗 杰 认 为 他 正在 做 的 项 目 和 公 
司 的 其 他 项 目 相 关 ， 但 他 不 知道 是 哪 几 个 项 目 ， 也 不 知道 谁 参与 了 那些 
项 目 。 罗 杰 可 以 给 不 同 的 人 发 送 电子 邮件 ， 描 述 他 正在 进行 的 项 目 并 询 
问 他 们 是 否 知 道 一 些 类 似 的 项 目 信息 ; 如 果 知 道 的 话 ， 他 们 可 不 可 以 癌 
那些 了 解 类 似 项 目的 人 引荐 罗 杰 。 或 者 他 也 可 以 直接 通过 知识 中 介 系 统 
查询 。 该 系统 会 持续 地 搜索 与 各 种 主题 和 项 目 分 别 相关 的 人 ， 并 私下 询 
问 符 合 条 件 的 人 是 否 愿意 与 罗 杰 结 识 ， 并 和 他 讨论 项 目 。 尺 管 罗 杰 在 局 
动 搜索 的 时 候 表 明了 目 己 的 身份 ， 但 只 有 接受 了 该 询问 的 人 才 会 被 真正 
介绍 给 他 ， 其 他 没有 接受 询问 的 人 仍然 维持 匿名 的 状态 。 


这 一 系统 的 理念 是 让 分 享 知 识 、 兴 趣 和 建立 社交 关系 变 得 更 加 便 
利 ， 以 提高 工作 场所 的 效率 。 帮 助 建立 新 社交 关系 的 系统 是 传统 知识 管 


理 系统 的 改进 版 ， 传 统 的 知识 管理 系统 一 般 主 要 用 于 文档 的 分 析 、 编 目 
以 及 分 类 ， 它 通常 距离 实现 真正 的 知识 和 关系 创建 仅 一 步 之 东 。 像 Tacit 
这 样 的 自动 系统 ， 可 以 在 人 们 需要 使 用 专门 知识 以 及 人 际 关 系 时 目 动 在 
系统 中 被 发 掘 出 来 ， 同 时 ， 该 系统 还 为 那些 不 愿 公 开 数 据 的 人 留 有 选择 
保密 的 权利 。 


麻 省 理工 学 院 在 2004 年 开展 的 Serendipity 项 目 和 Tacit 系 统 有 点 相 
似 ， 它 们 都 是 通过 一 个 外 部 系统 为 人 们 提供 中 介 服 务 。 和 打 省 理工 学 院 
早先 的 “现实 挖 据 * 项 目 一 样 ，Serendipity 项 目 使 用 从 参与 者 手机 上 采集 
到 的 数据 ， 试 图 让 拥有 相同 兴趣 的 陌生 人 在 空间 距离 上 相对 接近 的 时 候 
有 相互 认识 的 可 能 性 。 尽 管 ， 他 们 最 开始 的 想法 是 在 大 公司 或 大 型 会 议 
上 使 用 Serendipity， 将 其 作为 交流 的 媒介 ， 这 个 理念 之 后 还 催生 了 一 家 
叫 作 MetroSpark 的 手机 交友 公司 的 产生 。 


MetroSpark 公 司 要 求 用 户 在 注册 的 时 候 提供 关于 自己 的 信息 ， 并 且 
按照 重要 性 对 不 同 兴趣 进行 权衡 。 根 据 这 些 信息 以 及 兴趣 衡量 结果 ， 系 
统 会 计算 “相似 分 ”。 如 果 用 户 同意 ，MetroSpark 公 司 会 通过 用 户 手 机 上 
的 软件 ， 对 其 行为 进行 推 师 来 采集 更 多 的 间接 信息 ， 比 如 用 户 的 睡眠 时 
间 、 经 党 去 的 地 方 、 社 交 关 系 ， 甚 至 手机 上 的 游戏 和 其 他 应 用 程序 的 使 
用 情况 。 男 外 ， 用 户 也 可 以 选择 他 们 想 要 结识 的 人 的 类 型 。 所 有 这 些 信 
恩 组 成 用 户 的 个 人 资料 ， 并 存储 在 中 央 服 务 器 中 。 


用 户 可 以 自行 设置 相似 分 的 临界 值 ， 当 两 个 用 户 之 间 的 距离 在 蓝牙 
传输 的 范围 之 内 ， 并 且 如 采 他 们 的 相似 分 都 高 于 彼此 目 行 设 定 的 临界 
值 ， 那 么 服务 器 会 分 别提 醒 这 两 个 用 户 ， 在 他 们 附近 有 个 与 日 己 兴趣 相 
投 的 人 。 考 虑 到 隐私 和 社交 礼仪 的 问题 ， 系 统 会 通过 发 送 短信 提醒 用 
户 ， 并 询问 他 们 是 否 有 兴趣 与 这 个 人 碰面 。 如 果 两 个 用 户 都 选择 
了 “是 ”， 系 统 会 把 对 方 的 照片 以 及 一 系列 聊天 话题 发 送 到 双方 的 手机 
Slee 


还 有 许多 与 MetroSpark 相 似 的 地 理 社交 应 用 程序 ， 比 如 ，Grindr 是 


一 球 以 男 同 性 恋 为 目标 人 群 的 移动 约会 应 用 ， 还 有 Blendr 一 一 一 个 目标 
是 介绍 具有 不 同人 口 统计 特征 (如 职业 、 人 种 、 文 化 程度 等 ) 的 陌生 人 
相互 认识 的 手机 应 用 。 使 用 此 类 程序 的 用 户 可 以 上 传 并 更 新 自己 的 照片 
和 个 人 信息 。 以 Blendr 为 例 ， 用 户 可 以 扫描 附近 的 用 户 信息 《准确 的 位 
置信 息 是 被 隐藏 的 ) 并 且 标 记 他 们 感 兴趣 的 用 户 。 当 一 个 用 户 标 记 了 田 
一 个 用 户 ， 而 对 方 同 时 也 标记 了 人 他， 那么 这 两 个 人 就 可 以 通过 该 程序 直 
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不 和 邓 的 是 ， 不 是 所 有 的 软件 开 有 人 员 在 编写 软件 时 ， 都 考虑 了 用 户 
的 双向 授权 。 我 身边 的 女孩 (Girls Around Me) 就 是 一 个 不 需要 用 户 授 
权 的 应 用 程序 ， 它 很 容易 被 匿名 且 有 时 是 “ 拯 夺 性 ”的 行为 外 了 空子 。 这 
个 为 iPhone 设 计 的 应 用 程序 直接 从 脸谱 网 上 链接 个 人 公开 信息 ， 又 从 
Foursquare 上 获取 实时 位 置信 息 ， 并 把 这 些 信息 都 放 在 一 个 可 以 被 轻易 
搜索 到 的 地 图 上 。 在 不 需要 任何 授权 的 情况 下 ， 人 们 就 可 以 通过 这 个 应 
用 程序 搜索 一 定 的 区 域 ， 并 看 到 那些 将 相关 信息 在 线 显 示 的 用 户 ， 他 们 
的 照 厂 、 关 系 状 态 、 兴 趣 以 及 精确 的 位 置信 息 ， 但 这 些 用 户 本 和 映 可 能 3 
不 知道 这 些 内 容 是 对 所 有 用 户 公 开 的 。 本 质 上 ， 这 个 应 用 程序 就 是 在 用 
户 不 知情 ， 且 没有 明确 授权 的 情况 下 ， 组 合用 户 的 个 人 信息 细节 以 及 他 
们 的 县 体 地 理 位 置 。 因 此 2012 年 苹果 在 线 商店 将 之 下 线 。Foursquare 公 
司 也 引用 “不 允许 整合 不 同 站 点 的 信息 ， 以 防 对 一 系列 地 点 信息 进行 不 
恰当 的 浏览 ”的 政策 条 球 ， 拒 绝 “ 我 刁 边 的 女孩 ”访问 其 应 用 程序 接口 
(aPi) 。 


脸谱 网 的 隐私 政策 经 常 更 新 ， 而 且 使 用 起 来 也 有 很 多 不 明确 的 地 
方 ， 程 序 开发 者 们 常常 钻 这 个 空子 ， 从 而 导致 很 多 用 户 的 个 人 信息 意外 
泄露 。 相 反 ，Metrospark、Tacit、Grindr 和 Blendr 这 些 软件 则 需要 用 户 的 
授权 才 可 以 分 享 个 人 信息 ， 或 提供 中 介 介 绍 。 然 而 ， 这 些 服务 都 存在 于 
隐私 的 灰色 地 带 ， 致 使 很 多 理智 的 用 户 觉 得 不 舒服 ， 因 而 不 会 选择 使 用 
它们 。 在 这 个 领域 ， 软 件 设计 必须 仔细 考虑 ， 而 且 在 推广 中 保持 透明 也 
是 至 关 重 要 的 。 


社区 笔记 的 页 献 


对 于 社区 层面 上 的 数据 采集 ， 地 理 位 置信 息 附 带 上 其 他 传感器 所 采 
集 的 信息 ， 比 如 相机 或 加 速 计 ， 即 使 只 有 一 种 ， 都 有 可 能 市 来 巨大 的 利 
葵 。 当 社区 成 员 采 集 这 些 “ 协 变量 ”并 在 地 图 上 将 其 标记 在 特定 的 位 置 
时 ， 他 们 很 可 能 发 掘 出 自己 社区 中 一 些 隐藏 的 特性 ， 这 些 特性 则 强 合 
帮助 改善 所 有 人 生活 质量 的 潜在 可 能 。 这 种 类 型 的 社区 数据 采集 相 比 公 
司 中 的 数据 采集 有 一 个 明显 的 优势 ， 你 不 需要 说 服 所 有 人 参与 就 能 获得 
有 用 的 信息 ， 不 像 组 织 机 构 往 往 需 要 完整 的 社交 图 详 才 是 最 理想 的 。 


Noah 项 目 让 人 们 提 摄 带 有 地 理 标签 和 时 间 截 记 的 植物 、 动 物 和 菌 类 
的 照片 ， 并 将 它们 上 传 到 一 个 在 线 生物 体 数 据 库 。 该 数据 库 所 在 的 网 站 
提供 了 一 个 可 供用 户 搜索 的 地 图 ， 而 在 该 项 目 未 来 的 更 新 中 ， 将 会 允许 
人 们 创建 他 们 目 己 的 社区 生态 系统 ， 以 便 学 生 和 当地 的 野马 观察 家 碍 阅 
当地 的 生态 信息 。Noah 项 目 设置 特定 的 任务 吸引 用 户 参 与 ， 这 些 任务 一 
般 是 采集 特定 物种 的 照片 和 信息 ， 在 完成 任务 时 ， 用 户 可 以 根据 自己 的 
贡献 程度 赚 取 类 似 功 绩 勋 草 的 虚拟 土地 。 


Noah 项 目 将 现实 社区 和 在 线 社 区 连接 在 一 起 ， 让 人 们 了 解 一 定 区 域 
内 一 段 时 间 中 的 生态 系统 的 健康 状况 。 这 些 数据 现在 被 业余 爱好 者 和 伊 
利 诡 伊 大 学 芝加哥 分 校 以 及 康 系 尔 大 学 的 科学 家 使 用 ， 分 别 作为 天 于 松 
鼠 和 器 虫 项 目的 补充 数据 。 这 些 数据 还 可 以 用 来 标记 濒危 物种 ， 奶 踩 入 
侵 物 种 ， 可 以 作为 生态 系统 整体 健康 的 指标 。 


Noah 项 目 关 注 的 是 整个 社区 的 生态 健康 ， 然 而 还 有 其 他 很 多 移动 手 
机 应 用 则 是 让 用 户 报告 社区 中 人 工 环境 的 生态 健康 状况 。 
CitySourced,SeeClickFix,FixMyStreet 以 及 其 他 很 多 移动 手机 应 用 都 允许 
用 户 发 送 含 有 地 理 标 签 、 时 间 戳 记 并 且 被 预 分 类 过 的 照片 给 市 政府 。 在 
一 些 案 例 中 ， 这 些 应 用 程序 直接 和 城市 后 勤 部 门 的 工作 流 系统 相连 接 ， 
并 且 会 自动 生成 工作 指令 或 路 线 投诉 发 送 给 警察 局 ， 这 意味 着 可 以 更 快 


更 有 效 地 实现 修补 路 面 的 坑 洼 或 清除 涂鸦。 


让 城市 管理 者 、 首 席 信 息 官 以 及 市 长 支持 这 类 计划 并 不 困难 。 对 市 
民有 好 处 的 对 于 政治 来 说 也 是 好 的 。 而 这 些 应 用 程序 中 最 成 功 的 那 几 
个 ， 都 是 由 那些 致力 于 将 他 们 的 软件 又 冤 整 合 到 城市 现存 的 基础 设施 中 
的 公司 所 开发 的 ， 所 以 不 需要 在 升级 现 有 的 信息 技术 上 文 出 太 多 。 


实际 上 ， 一 些 市 政府 是 这 方面 的 先驱 ， 它 们 开始 自行 开发 应 用 程 
序 。 在 加 利 福 尼 亚 州 圣何塞 市 的 “ 竺 何 塞 311” 系 统 是 由 CitySourced 公 司 
开发 的 ， 该 系统 让 这 个 小 公司 迅速 地 发 展 起 来 。 同 样 的 ， 旧 金山 市 将 城 
市 数据 适当 地 对 公众 开放 ， 包 括 街道 清洁 计划 、 停 车 信息 还 有 再 生 设 施 
信息 等 ， 用 来 或 励 所 有 可 以 提供 有 效 分 享 城市 信息 方式 的 移动 手机 应 用 
和 网 站 的 发 展 。 


对 于 城市 管理 者 和 应 用 开发 人 员 来 说 ， 他 们 现在 之 所 以 能 够 方便 地 
合作 ， 都 要 归功 于 一 个 名 为 Open311 的 初创 企业 ， 它 是 由 纽约 市 的 非 营 
利 组 织 OpenPlans 开 发 的 。 其 目标 是 建立 一 个 开放 平台 ， 让 城市 可 以 利 
用 现 有 的 基础 设施 来 发 布 城市 信息 ， 以 便 开 发 网 站 和 移动 应 用 。 


在 这 一 点 上 ， 大 多 数 这 类 服务 都 允许 用 户 匿名 报告 城市 问题 ， 服 务 
需 只 能 获取 他 们 的 位 置 。 因 为 这 项 服务 的 收益 一 一 一 个 更 清洁 的 社区 ， 
只 需要 来 自分 散 位 置 的 个 人 用 户 提 供 的 信息 残 可 以 实现 ， 因 此 有 很 多 的 
人 愿意 使 用 这 些 服务 。 然 而 这 些 应 用 程序 的 后 续 版 本 可 能 同 用 户 注册 并 
录入 更 多 个 人 信息 的 选择 。 这 样 可 以 让 用 户 更 方便 地 获得 针对 他 们 所 投 
诉 问 题 的 反馈 。 也 可 以 在 社区 有 活动 时 获得 通知 ， 还 可 以 参与 一 些 游戏 
和 苋 赛 。 


智能 手机 还 可 能 通过 另外 一 个 途径 来 改善 社区 健康 状况 ， 即 让 人 们 
与 同一 区 域内 的 其 他 人 共享 自己 跑步 、 骑 行 以 及 通勤 的 路 径 。 从 21 世 纪 
中 期 开始 ， 有 许多 网 站 已 经 提供 了 可 以 根据 位 置 和 距离 搜索 的 由 用 户 生 
成 的 跑步 和 骑 行 路 径 。Mapmyrun.com，Mapmyride.com，Walkjogrun.net， 


bikely，Runkeeper，Runtastic 和 DailyMile.com 都 被 广泛 地 用 来 分 享 和 寻找 
路 径 。 这 些 路 径 的 数据 既 可 以 通过 手动 添加 ， 也 可 以 通过 珊 有 GPS 心 片 
的 设备 上 传 。 很 多 这 类 应 用 都 可 以 让 用 户 很 容易 地 分 享 由 iPhone 和 安 卓 
设备 实时 跟踪 记录 下 来 的 路 线 。 


然而 ， 可 供 搜索 的 自行 车 通勤 路 径 还 有 一 些 未 被 开发 的 潜能 ， 可 以 
通过 社区 的 众 包 来 解决 。 众 包 就 是 一 群 人 通过 贡献 自己 的 数据 和 资源 来 
解决 问题 。 自 行车 通勤 者 更 愿意 与 其 他 考虑 用 自行 车 蔡 代 汽车 通勤 的 人 
分 享 自 己 的 穷 门 和 策略 ， 但 现在 还 没有 合适 的 方法 来 寻找 从 不 同 社 区 到 
市 中 心 的 可 行 自 行车 通勤 路 径 ， 以 及 高 峰 时 段 这 些 路 径 的 交通 和 道路 情 
况 ( 第 三 章 中 提 到 过 UCLA 的 Biketastic 项 目 ， 采 和 集 的 就 是 这 类 数据 〉。 


另外 ， 对 于 新 的 自行 车 通勤 者 来 说 ， 预 估 在 悠闲 速度 下 的 骑 行 时 间 
《其 中 包括 等 信号 灯 的 时 间 ) ， 是 很 有 帮助 的 。 像 Runkeeper 和 
DailyMile 这 样 比较 受 欢迎 的 服务 ， 一 般 都 市 有 专门 针对 通勤 者 的 搜索 功 
能 。 应 用 开发 者 也 可 以 开发 能 够 自动 采集 自行 车 通勤 者 通勤 数据 的 应 用 
程序 ， 并 将 数据 上 传 到 这 些 现 有 的 网 站 上 。 考 虑 到 隐私 ，Runkeeper 和 
DailyMile 都 把 个 人 活动 路 线 的 精确 起 点 和 终点 隐 去 ， 让 它们 的 用 户 在 发 
布 通勤 路 径 时 感到 放心 。 尽 管 没 有 办 法 匿名 发 布 路 线 ， 通 勤 者 并 不 需要 
经 党 与 公众 分 享 他 们 的 通勤 数据 ;一 条 通勤 路 径 分 享 一 次 就 可 以 给 其 他 
人 提供 有 效 的 帮助 。 


分 气 社区 中 人 们 的 行为 ， 并 把 它们 和 其 他 诸如 交通 、 空 气 污染 或 其 
他 环境 指标 数据 关联 起 来 的 工具 ， 对 于 关心 社区 的 积极 分 子 来 说 会 很 有 
用 。 加 利 福 尼 亚 大 学 和 英特尔 合作 的 “常识 ”项 目 〈 第 三 半 中 介绍 过 ) = 
试 给 入 们 配备 带 有 蓝牙 装置 的 空气 质量 感应 右 ， 感 应 器 上 的 数据 可 以 通 
过 蓝牙 传输 到 手机 上 。 为 了 改 矢 社 区 ， 积 极 分 子 可 以 同 在 公共 空间 活动 
的 人 们 提供 空气 质量 感应 器 ， 比 如 那些 在 公园 游玩 或 在 等 公交 车 的 人 。 
如 果 这 些 感应 器 检测 到 空气 污染 物 水 平 较 高 ， 那 么 就 可 以 发 起 针对 当地 
工厂 的 请 愿 运动 ， 要 求 他 们 减少 污染 物 的 排放 。 


最 近 ， 旧 金山 一 个 著名 的 低 收 入 社区 Bayview 开 展 了 一 个 创新 卫生 
保健 项 目 ，Bayview 社 区 由 于 临近 城市 工业 区 ， 长 期 受到 污染 的 困扰 ， 
这 一 项 目 希 望 改善 该 地 区 的 压抑 环境 ， 减 少 可 能 导致 唆 喘 、 癌 症 、 糖 尿 
病 和 气胸 等 儿童 及 成 人 疾病 的 因素 。 这 些 应 激 原 《〈 即 引起 疾病 的 因素 ) 
包括 较 差 的 空气 质量 和 骂 声 污染 、 虐 待 、 健 康 食物 的 匮乏 、 锻 烁 不 足 ， 
以 及 来 目 家 寿 和 其 他 渠道 社会 文 持 的 缺失 等 。 


通过 当地 儿童 的 手机 所 记录 的 数据 ， 包 括 他 们 上 学 的 路 径 ， 等 竺 公 
共 交 通 工具 的 时 长 ， 距 离 贩卖 新 鲜 食 品 的 杂货 店 的 距离 等 ， 可 以 有 效 识 
别 贫穷 社区 的 一 些 系统 性 的 应 激 原 。 尽 管 儿科 医生 不 能 通过 来 自 手 机 的 
数据 解决 所 有 问题 ， 但 他 们 可 以 给 病 童 的 父母 提 一 些 改变 状况 的 建议 ， 
比如 换 条 路 去 上 学 以 减少 遇 到 的 汽车 ， 或 者 尽 可 能 地 选择 一 条 路 过 新 鲜 
食物 市 场 的 路 径 。 另 外 ， 移 动 数据 还 可 以 帮助 卫生 保健 提供 者 们 决定 要 
为 哪些 社区 提供 新 的 娱乐 设施 和 课 后 资源 。 这 类 干预 措施 即使 没有 来 目 
手机 的 信息 也 显然 是 需要 的 ， 但 具体 的 数据 更 有 说 服 力 ， 尤 其 是 当 卫 生 
保健 介入 和 卫生 保健 费用 相关 联 的 时 候 ， 这 类 方法 会 特别 有 优势 。 


对 于 这 些 项 目 来 说 ， 长 期 的 激励 机 制 可 能 包括 兴建 新 的 公园 、 娱 乐 
中 心 ， 以 及 道路 “减肥 ”， 如 减 组 车速、 拓宽 人 行道 、 种 植 绿色 植物 等 。 
更 直接 和 迅速 的 奖励 机 制 可 以 是 针对 全 部 或 部 分 参与 者 进行 补贴 ， 比 如 
减免 他 们 购买 手机 的 费用 或 对 话费 进行 补贴 。 因 为 家 长 完全 有 理由 不 信 
任 那些 监控 目 己 孩 子 所 处 位 置 的 技术 ， 这 个 项 目 在 整个 社区 中 的 接受 
度 ， 有 赖 于 那些 有 影响 力 的 社区 成 员 对 这 一 技术 及 其 目标 进行 宣传 。 


得 蔡 于 合适 的 奖励 机 制 以 及 设计 精 民 的 程序 ， 越 来 越 多 的 数据 在 小 
规模 的 群体 中 产生 并 得 以 采集 ， 工 作 场 所 和 社区 中 的 政策 设计 也 很 可 能 
从 学 术 理论 方法 转换 到 实证 方法 。 不 管 是 为 了 促进 小 规模 群体 数据 的 合 
理 使 用 ， 还 是 为 了 保护 个 人 的 隐私 ， 都 需要 协议 和 规则 ; 尽管 如 此 ， 每 
个 机 构 或 社区 的 成 员 都 有 权 从 它们 产生 的 数据 中 获得 利益 。 如 果 应 用 开 
发 者 认真 考虑 如 何 勤 励 用 户 参 与 和 保护 用 户 隐 私 ， 在 小 规模 群体 的 数据 


采集 领域 将 有 很 多 不 同 的 机 会 。 


当 考 虑 到 工作 场所 的 工作 成 果 和 效率 ，Tacit 公 司 找到 了 一 个 最 有 效 
的 方法 来 保证 所 有 用 户 的 隐私 ， 即 在 用 户 和 信息 之 间 仅 扮演 中 介 的 角 
色 ， 只 有 在 用 户 授权 的 情况 下 个 人 信息 才 会 被 分 享 。 在 通过 手机 报告 社 
区 衰败 情况 的 案例 中 ， 人 们 似乎 愿意 同城 市 管理 部 门 分 享 上 自己 的 匿名 位 
置信 息 。 游 戏 或 其 他 的 激励 手段 是 否 能 让 用 户 愿 意 亮 出 自己 的 真实 号 
份 ， 还 有 待 观察 ;然而 ， 越 来 越 多 的 人 开始 使 用 位 置 应 用 Foursquare， 
而 推 符 和 脸谱 网 提供 的 数据 也 表明 公众 对 于 分 享 自己 所 在 位 置信 息 的 抵 
触感 也 在 下 降 。 


当 分 享 通勤 、 徒 步 或 骑 行 路 径 的 应 用 程序 变 得 越 来 越 受 欢迎 ， 类 似 
Runkeeper 和 Dailymile 这 样 的 公司 ， 需 要 仔细 考虑 它们 的 保障 措施 ， 以 
保证 更 多 的 用 户 能 够 安全 分 享 数据 。 因 为 采集 的 数据 并 不 多 ， 而 参与 其 
中 的 用 户 是 自愿 将 自己 的 数据 分 享 到 公共 数据 库 中 的 ， 所 以 目前 的 隐私 
和 安全 措施 在 这 个 领域 中 比较 适用 。 


然而 ， 在 污染 追踪 器 以 及 医生 癌 病 人 提供 手机 ， 以 期 找 出 社区 中 的 
应 油 原 这 两 个 案例 中 ， 隐 私 保 护 的 局 面 发 生 了 转弯， 道德 问题 随 之 产 
生 。 在 这 个 案例 中 ， 可 能 需要 依靠 法 律 机 制 来 说 服 参与 者 ， 他 们 分 享 的 
数据 不 会 被 用 来 针对 他 们 ， 也 不 会 提供 给 其 他 人 。UCLA 的 卡带 :希尔顿 
和 德 博 拉 . 艾 斯 洒 将 这 个 问题 明确 地 提 了 出 来 :“ 如 果 原 始 的 位 置 数据 和 
经 验 取样 数据 在 民事 诉讼 中 可 以 很 容易 被 获取 ， 那 么 个 人 用 户 乃 至 所 有 
民众 可 能 都 不 会 接受 这 种 新 的 调研 形式 。” 她 们 建议 通过 所 谓 的 证 据 特 
权 ， 来 将 个 人 数据 等 同 于 非 商 业 交 易 机 蜜 来 对 符 。 通 过 这 种 特权 ， 数 据 
不 能 向 特定 的 群体 或 机 构 公 开 ， 也 不 能 被 传唤 或 用 于 法 律 程序 中 。 


直到 现在 ， 人 们 才 开始 认真 地 讨论 关于 个 人 数据 的 所 有 权 性 质 及 其 
保护 。 然 而 ， 即 使 没有 这 些 保护 措施 ， 很 多 人 仍然 愿意 与 设计 应 用 程序 
的 公司 分 享 大 量 的 个 人 数据 ， 比 如 位 置 追 踪 信 息 ， 其 至 并 不 介意 将 这 些 
数据 公开 发 布 。 他 们 这 么 做 是 因为 ， 他 们 觉得 不 可 能 有 法 律 纠纷 ， 并 且 


对 于 他 们 来 说 ， 更 好 的 信息 能 够 获得 更 大 的 回报 。 因 此 ， 关 于 这 类 数据 
采集 和 分 至 的 细微 差别 的 标准 和 法 律 ， 可 能 需要 很 多 年 才能 被 大 家 接 

受 。 同 时 ， 最 佳 的 实践 方法 是 在 所 有 应 用 中 ， 简 单 并 明确 地 告知 人 们 ， 

他 们 分 至 数据 的 风险 以 及 好 处 。 


1. “城市 311” 是 纽约 政府 提供 的 一 项 便民 计划 ， 通 过 相关 的 电话 、 短 信和 网 络 渠 道 ， 人 
们 可 以 获得 政府 信息 ， 以 及 一 系列 非 紧急 性 服务 。 一 一 编者 注 


过 去 的 10 年 里 ， 很 多 犯罪 数据 都 补 电 子 化 了 ， 这 就 为 数据 挖 气 提 
供 了 可 能 性 ， 从 中 得 到 的 模式 可 以 帮助 警察 部 门 做 出 更 好 的 决策 比 
如 周 五 的 晚上 应 该 将 警车 派 到 哪些 地 段 ， 或 者 像 一 场 周 日 足球 赛 这 种 
重大 活动 应 该 配置 多 少 警 力 。 
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第 五 章 
城市 数据 的 大 用 途 


到 2009 年 ， 全 球 70 亿 总 人 口中 已 有 一 半 以 上 居住 在 城市 。 在 美国 ， 
总 人 口 的 82% 是 城市 居民 ， 而 印度 则 仅 有 30%。 不 管 在 哪个 国家 ， 城 市 
都 具有 多 样 化 的 居民 和 行为 特征 ， 这 些 也 都 体现 在 城市 数据 中 。 本 章 讨 
论 的 对 象 是 人 口 在 1 000 人 到 100 万 人 之 间 的 城市 ， 并 主要 关注 两 种 体现 
城市 特征 的 数据 : 交通 流量 和 犯罪 率 统 计 。 


具体 而 言 ， 本 章 探 讨 的 是 采集 交通 数据 的 多 种 途径 ， 包 括 来 自 移 动 
电话 和 车载 GPS 系 统 、 道 路 探测 设备 的 用 户 数 据 ， 以 及 来 日 传统 的 交警 
及 其 他 交通 服务 机 构 的 报告 等 ， 并 对 其 中 的 隐私 性 和 商业 性 的 考虑 进行 
了 讨论 。 我 们 也 注意 到 正在 激增 的 公共 犯罪 数据 库 ， 警 察 、 政 府 官员 、 
居民 或 是 房地产 商 部 可 以 通过 这 些 数 据 库 查看 城市 中 发 生 问 题 的 时 间 和 
地 方 。 本 革 还 特别 讨论 了 通过 摄像 尖 玉 集 数 据 在 法 律 和 拉 术 上 可 能 面临 


的 挑战 ， 这 些 问题 在 交通 和 犯罪 监控 领域 都 变 得 日 荔 普 衣 。 


尽管 本 章 涉及 的 数据 采集 技术 大 多 是 简单 明确 的 ， 但 数据 的 内 涵 广 
泛 。 第 六 章 考 察 了 如 何 利用 城市 交通 流量 的 数据 来 分 配 着 路 资源 ， 并 为 
各 驶 者 提供 实时 交通 状况 信息 和 路 线 选择 建议 。 当 犯罪 数据 与 其 他 一 些 
信息 如 天 气 、 地 理 地 形 、 重 要 事件 、 一 年 中 的 某 些 时 间 相 匹配 时 警方 可 
以 利用 这 些 信 息 ， 更 有 预见 地 进行 犯罪 监控 。 


城市 空间 层面 的 隐私 问题 与 前 两 个 空间 层面 有 所 不 同 。 在 城市 中 ， 
人 们 有 足够 的 理由 希望 保护 自己 的 隐私 信息 。 然 而 ， 如 果 发 生 了 犯罪 行 
为 且 嫌 疑犯 已 经 确定 ， 那 么 这 个 人 的 匿名 权 就 失效 了 。 他 的 姓名 、 年 
龄 、 保 释 金 等 信息 都 会 进入 公共 档案 ， 并 出 现在 某 份 当地 报纸 上 。 而 
且 ， 痪 方 还 可 能 会 同一 些 研 究 人 员 提 供 这 些 信息 ， 以 进行 减少 本 地 区 犯 
徘 的 研究 。 本 章 也 将 涉及 一 些 这 样 的 案例 。 


交通 数据 


曾几何时 ， 大 多 数 的 交通 信息 都 是 来 自 道路 上 方 的 直升机 观测 报 
告 。 如 今 ， 归 功 于 GPS 导航 设备 、 交 通 摄像 凑 ， 以 及 从 要 驶 员 的 手机 和 
专 为 采集 交通 数据 而 设计 的 车 载 传感器 中 获得 的 位 置信 息 ， 普 通 的 敬 驶 
者 (以 及 交通 报告 员 〉 可 以 获得 比 以 往 要 详细 得 多 的 交通 信息 。 而 根据 
美国 2011 年 的 《城市 交通 状况 报告 》 (Urban Mobility Report) ， 交 通 
拥堵 每 年 给 美国 造成 的 经 济 损 失 已 经 超过 了 1 000 亿 美元 ， 并 有 旦 每 年 浪 
费 每 个 通勤 者 长 达 34 小 时 ， 因 此 有 必要 寻找 一 条 更 好 的 路 线 。 


位 于 华盛顿 州 柯 元 兰 的 Inrix 公 司 致 力 于 通过 更 多 的 交通 数据 ， 为 萄 
驶 者 的 导航 设备 提供 每 分 钟 实 时 更 新 的 路 况 。 该 公司 是 世界 上 最 大 的 交 
通 数据 供应 商 ， 这 一 市 场 的 竞争 者 还 有 NACTEQ、TomTom International 
BV 和 Media Mobile 几 家 公司 。Intrix 的 交通 数据 服务 的 客户 包括 AT&T、 


宝马 、 福 特 、 佳 明 、 谷 歌 、MapQuest 和 Sprint 等 。 


2004 年 ，Intrix 从 微软 公司 独立 出 来 ， 到 2010 年 已 经 在 美国 实现 了 
对 260 000 英 里 〈 约 418 429 干 米 ) 长 道路 的 实时 监测 覆盖 。Intrix 用 多 样 
化 的 数据 进行 交通 时 间 预 测 和 路 线 建议 ， 包 括 警方 和 紧急 情况 扫描 摄像 
头 提供 的 交通 警示 信息 、 各 州 交 通 部 门 DOts) 汇集 的 历史 数据 、 道 路 
传感器 和 摄像 头 的 实时 数据 、 越 来 越 多 轨 驶 者 的 手机 和 GPS 设备 的 汇聚 
言 息 、 重 要 活动 和 事件 的 信息 ， 如 演唱 会 或 体育 比赛 ， 还 有 从 车 载 设备 
采集 数据 中 推断 出 的 道路 状况 和 天 气 。 


传统 的 交通 数据 采集 方法 ， 基 本 上 就 是 从 地 面 或 空中 进行 人 工 观 
测 ， 且 仍 在 使 用 ， 如 无 线 电 交 通报 告 等 方式 。 来 自 交 警报 告 、 紧 急 情 况 
扫描 摄像 头 ， 以 及 桥架 、 隧 道 与 高 速 公 路 管理 组 织 和 道路 摄像 头 的 数据 
被 类 似 Clear Channel 这 样 的 公司 汇总 ， 并 出 售 给 广播 、 电 视 台 以 及 Inrix 
公司 等 。 研 究 人 员 也 可 以 通过 购买 或 授权 获得 数据 ， 但 这 些 数据 一 般 需 
要 用 户 特别 通过 设备 制造 商 〈 如 佳明 和 TomTom 等 ) 进行 订阅 而 获得 授 
权 。 


通过 公共 交通 摄像 头 可 以 迅速 且 简 单 地 判断 一 条 道路 是 人 否 拥堵 ， 现 
在 己 有 很 多 摄像 头 的 实时 画面 可 以 通过 互联 网 直接 获取 。 这 些 摄像 头 通 
第 被 用 于 对 交通 状况 进行 定性 评 佑 ， 并 快速 发 现 交 通 事故 发 生地 点 。 然 
而 ， 也 有 些 公 司 ， 如 比利时 的 Traficon 和 以 色 列 的 Agent Vi 等 ， 正 在 生产 
可 以 自动 分 析 视 频数 据 的 监测 系统 。 


另 一 种 监测 交通 状况 的 方式 是 通过 道路 植 入 式 感应 设备 。 这 些 被 称 
为 植 入 环 路 感应 器 的 设备 已 经 使 用 了 数 十 年 ， 并 且 还 在 提供 有 价值 的 数 
据 。 这 种 环 路 感应 堪 可 以 产生 一 个 电磁 场 ， 当 汽车 的 金属 展 盘 经 过 这 个 
场 时 会 对 其 产生 干扰 。 到 2009 年 ， 加 利 福 尼 亚 州 的 高 速 公路 系统 下 已 经 
安装 了 25 000 个 这 样 的 感应 器 ， 用 于 监测 道路 流量 、 拥 墙 情况 和 速度 。 
州 和 联邦 交通 部 门 保存 了 环 路 感应 器 采集 到 的 历史 数据 ， 并 回 公 众 开 
放 ， 有 时 也 可 以 从 交通 部 门 的 官方 网 站 上 获得 。Inrix 公 司 也 将 这 些 历史 


数据 纳入 了 他 们 的 交通 预测 算法 中 ， 基 于 这 些 历史 交通 数据 ， 可 以 帮助 
人 们 设计 交通 线路 ， 比 如 ， 提 供 一 条 在 周 四 下 午 4 点 半 罕 越 革 路 易 斯 城 
区 的 路 线 。 


还 有 一 类 感知 技术 是 Inrix 公 司 没有 采用 的 ， 但 可 以 用 于 进行 与 Inrix 
相似 的 交通 流量 估 判 ， 那 就 是 固定 式 赣 牙 探 测 右 。 马 里 兰 大 学 2012 年 的 
一 个 项 目 表 明 ， 两 个 相距 2 英里 《〈 约 合 3.22 千 米 ) [ALE OS A 
器 可 以 精确 获得 交通 流速 度数 据 。 目 前 ， 大 约 每 20 辆 汽车 中 就 有 一 辆 安 
装 了 带 有 一 个 唯一 识别 码 的 车 载 赣 牙 感 应 路， 一 般 是 用 于 连接 手机 以 便 
在 开车 时 不 用 手持 手机 便 可 通话 。 两 个 固定 式 蓝牙 探测 器 中 的 一 个 捕捉 
到 和 车载 蓝 牙 设 备 的 识别 码 ， 当 和 车辆 行驶 到 为 一 个 探测 器 时 ， 如 果 第 二 个 
探测 强 也 捕捉 到 同一 个 识别 码 时 ， 和 车辆 的 运行 速度 就 可 以 被 计算 出 来 
Ts 


尽管 环 路 感应 、 蓝 牙 探 测 和 道路 摄像 头 是 Inrix 公 司 所 需 实 时 数据 的 
来 源 ， 但 这 些 技 术 并 不 能 覆盖 所 有 道路 。 这 些 基础 设施 感应 器 集中 安装 
于 主要 的 高 速 公 路 和 域 区 。 所 以 ，Inrix 公 司 开始 寻求 更 加 分 散 的 交通 数 
据 来 源 点 : 车 辆 上 的 GPS 导航 设备 和 智能 手机 。 虽 然 GPS 导 航 设 备 相 对 
较为 精确 ， 而 手机 的 定位 数据 依赖 于 Wi-Fi 和 手机 通信 基站 发 射 塔 的 三 
角 测 量 ， 有 时 会 有 超过 20 英 尺 〈 约 6 米 ) 的 误差 。 不 过 ， 通 过 一 定数 量 
的 手机 数据 ， 还 是 可 以 从 误差 中 提取 出 有 用 信息 。 到 2012 年 ，Inrix 公 司 
已 经 获得 了 全 球 大 约 5 000 万 部 手机 和 GPS 设备 的 数据 ， 大 部 分 来 自 车 队 
和 商务 车 辆 。 该 公司 称 ， 美 国 的 众 包 数据 主要 来 自 车 载 GPS 设备 。2011 
年 夏天 ，Inrix 公 司 收购 了 一 家 利用 手机 通信 基站 三 角 测 量 技 术 对 车 辆 进 
行 定位 的 瑞 国 公司 IT IS。 尺 管 这 项 技术 的 精确 度 不 如 GPS， 且 在 美国 以 
外 的 地 区 只 能 从 车 流 中 获取 大 约 50% 的 定位 数据 ， 但 对 于 GPS 设 备 不 普 
遍 的 地 区 来 说 是 一 个 很 有 用 的 补充 。 


Inrix 公 司 也 考虑 到 了 城市 及 周边 地 区 的 重要 活动 ， 以 及 历史 上 类 似 
活动 的 举行 对 交通 状况 的 影响 。 举 办 活动 的 公司 员工 手动 汇集 活动 的 相 


天 数据 ， 之 后 这 些 信息 和 被 纳入 交通 预测 和 路 线 建 议 的 算法 中 。 


此 外 ，Inrix 公 司 还 与 一 系列 的 汽车 制造 商 合 作 ， 包 括 奥迪 、 尼 桑 和 
福特 等 ， 为 它们 的 车 载 导 航 系统 提供 交通 数据 信息 。2012 年 ，Inrix 公 司 
开始 从 这 些 合作 伙伴 生产 的 车 内 传 感 右 中 挖掘 信息 。 在 众多 传感器 中 ， 
防 抱 死 刹车 系统 和 挡 风 玻璃 两 刊 器 的 使 用 情况 也 成 为 判断 道路 实时 状况 
的 重要 信息 。 


与 Inrix 公 司 一 样 ， 谷 歌 也 使 用 手机 帮助 判断 道路 交通 状况 。 除 了 使 
用 车 队 数 据 外 ， 谷 歌 还 可 以 从 那些 允许 谷歌 地 图 读 取 GPS 信 息 的 用 户 手 
机 上 ， 以 匿名 方式 获取 定位 和 速度 数据 。 据 谷歌 公司 的 说 法 ， 用 户 的 手 
机 会 匿名 同 谷 歌 及 送 手 机 移动 速度 的 数据 。 结 合同 一 时 间 道 路 上 其 他 用 
户 的 手机 发 送 来 的 速度 数据 〈 如 今 超 过 2 亿 部 移动 设备 安装 了 谷歌 地 
图 ) ， 这 种 方法 提供 了 非常 不 错 的 实时 信息 。 但 是 谷歌 缺乏 有 些 国家 的 
数据 ， 所 以 从 2011 年 秋 开 始 ， 它 们 与 Inrix 公 司 合作 来 填补 这 方面 的 空 
缺 。 


谷歌 考虑 到 了 用 户 的 隐私 问题 ， 它 们 采集 的 速度 和 位 置信 息 是 匿名 
的 ， 并 且 珊 要 用 户 同意 才能 上 传 数 据 到 谷歌 的 服务 器 。 此 外 ， 当 多 人 从 
同一 区 域 肥 送 数 据 报告 时 ， 谷 歌会 将 这 些 数据 混合 起 来 ， 从 而 很 难 去 区 
分 不 同 手机 的 上 传 内 容 。 最 重要 的 是 ， 每 一 段 行程 的 起 点 和 终点 数据 会 
被 永久 性 抹 掉 ， 即 使 是 谷歌 员工 也 无 法 获知 相关 信息 。 而 在 手机 上 人 允许 
谷歌 地 图 目 动 上 传 数据 至 服务 器 的 用 户 ， 也 可 以 选择 通过 茶 止 定位 服务 
来 停止 上 传 数 据 。 尽 管 谷 歌 为 其 一 些 地 图 数据 提供 了 应 用 程序 编程 接 
口 ， 包 括 方向 、 距 离 和 海拔 ， 但 是 目前 区 通 数据 对 于 那些 想 要 开发 它们 
目 己 应 用 的 程序 员 来 说 依然 是 不 可 得 的 。 


2013 年 中 期 ， 谷 歌 收购 了 硅谷 的 创业 公司 Waze， 该 公司 的 业务 主 
要 是 在 手机 用 户 允 许 的 前 提 下 采集 交通 数据 。 实 际 上 ，2009 年 成 立 的 
Waze 公 司 主 要 依靠 用 户 自 行 充 实地 图 内 容 〈 比 如 ， 补 充 空 白 小 路 的 路 
名 ) ， 还 通过 用 户 上 报 车 辆 测速 区 、 交 通 拥堵 和 事故 。2012 年 ，Waze 


公司 估计 其 用 户 数量 比 先前 翻 了 一 番 ， 从 1 000 万 涨 到 了 2 000 万 。 随 着 
更 多 城市 的 更 多 用 户 参 与 进来 ，Waze 公 司 可 以 提供 更 准确 的 行程 时 间 
和 更 好 的 路 线 选择 ， 它 们 的 服务 因此 也 变 得 更 加 有 价值 。 为 了 吸引 更 多 
用 户 的 参与 ， 这 家 公司 还 引入 了 “社交 游戏 ”元 素 ， 向 使 用 软件 的 用 户 发 
放 虚 拟 奖 励 、 积 点 和 徽章 。 


谷歌 、Waze 和 其 他 一 些 公司 开发 的 这 类 手机 交通 应 用 ， 能 够 吸引 
用 户 的 原因 主要 是 便宜 且 提 供 比 较 可 靠 的 交通 预测 数据 ， 并 且 还 有 一 定 
的 使 用 乐趣 。 虽 然 Inrix 和 TomTom 公 司 也 提供 手机 应 用 ， 但 它们 的 核心 
业务 是 为 车 载 导航 系统 提供 精确 的 交通 分 析 数 据 。 目 前 ，Inrix 和 大 众 来 
源 数据 软件 的 交通 数据 还 无 法 免费 下 载 ， 尽 管 有 些 可 以 通过 购买 使 用 许 
可 的 方式 获得 。2008 年 以 来 ， 马 里 兰 大 学 与 Inrix 公 司 和 I-95 亡 道 联合 组 
织 三 建立 了 合作 关系 ， 研 究 人 员 通 过 利用 Inrix 公 司 在 I_95 交 通 亡 道 
贯穿 美国 整个 东海 岸 线 ， 北 起 缅 因 州 南 至 佛罗里达 州 ) 沿线 10 个 州 ， 
超过 20 000 英 里 ( 约 32 OOOF OK) 道路 上 ， 采 集 汇 总 的 实时 和 历史 交通 
数据 ， 来 帮助 美国 交通 部 研究 更 好 地 分 配 交 通 资源 及 分 配 地 点 的 方法 。 


用 数据 预测 犯罪 


预测 犯罪 行为 的 关键 是 犯罪 历史 记录 的 基础 数据 库 。 如 今 最 可 靠 的 
数据 采集 手段 与 过 去 相 比 并 没有 什么 不 同 : 警察 仍然 需要 写 事故 和 逮捕 
报告 ， 其 中 包括 了 很 多 有 用 的 信息 。 这 些 案件 报告 主要 有 两 种 来 源 : 一 
是 警察 在 巡 人 逻 时 发 现 犯罪 行为 ， 对 嫌疑 人 进行 盘问 并 决定 是 否 建 捕 ; 二 
是 有 人 报警 提供 消息 。 警 察 会 在 报告 中 记录 时 间 、 日 期 、 犯 罪行 为 发 生 
地 点 和 类 型 (有数 百 种 类 型 )， 还 有 更 具体 的 信息 ， 如 周边 环境 (比如 
是 在 便利 店 里 、 小 路 上 或 是 街道 上 ) ， 如 果 是 有 人 报警 ， 还 会 记录 报警 
人 的 姓名 和 联系 信息 。 


数 十 年 来 ， 事 件 和 逮捕 报告 数据 都 被 输入 电脑 进行 处 理 并 标注 于 地 


图 上 ， 形 成 更 有 用 的 视觉 空间 格式 信息 。 这 些 地 图 一 般 补 用 于 一 些 特殊 
案件 ， 例 如 用 于 界定 犯罪 嫌疑 人 活动 的 地 理 范 围 ， 还 可 以 从 中 分 析 特 定 
社区 可 能 的 多 发 犯罪 类 型 ， 以 及 随 着 时 间 变 化 ， 犯 罪行 为 向 新 社区 的 空 
间 迁 移 和 扩散 情况 。 


近年 来 ， 专 业 算 法 和 实时 犯罪 数据 的 使 用 可 以 对 这 些 犯 罪 地 图 进行 
持续 升级 ， 从 而 可 以 在 犯罪 发 生 之 前 先 将 警力 部 署 至 事 发 地 【〈 详 见 第 六 
章 ) 。 在 田纳西 州 的 孟菲斯 市 ， 警 方 从 2005 年 就 开始 使 用 一 球 叫 作 Blue 
CRUSH 的 软件 。 通 过 历史 犯罪 数据 的 热点 地 图 ， 警 官 们 可 以 检查 当前 
的 犯罪 活跃 度 ， 以 及 因为 之 前 的 警力 部 署 而 导致 的 相应 区 域 的 犯罪 水 平 
变化 情况 。 每 周 更 新 的 热点 地 图 会 被 用 于 制订 下 一 周 的 人 员 部 署 策略 。 


除了 能 生成 显示 犯罪 行为 的 空间 关系 图 ， 犯 罪 数 据 还 可 以 与 多 层 地 
理 信 息 图 相 登 加 ， 如 美国 地 质 勘探 局 提供 的 地 形 数据 。 另 外 ， 也 可 以 将 
罪犯 和 受害 人 的 住址 标注 在 地 图 上 并 合 加 地 理 信息 ， 如 道路 、 学 校 、 选 
区 、 铁 路 、 工 三、 融 业 岗位 、 平 均 收 入 等 可 以 从 美国 统计 局 免费 获取 的 
各 种 数据 。 同 样 ， 不 同 犯罪 数据 之 间 还 可 以 进行 比较 ， 以 获得 更 深入 的 
了 解 一 一 比如 查获 毒品 和 汽车 盗 贸 发 生 时 间 的 比较 。 


除了 绘制 犯罪 信息 地 图 ， 一 些 研究 人 员 和 警力 部 门 也 在 编辑 可 疑 帮 
派 活 动 网 络 图 。 为 了 弄 清 楚 帮 派 之 间 的 活动 关系， 洛杉矶 警察 轩 和 加 州 
大 学 洛杉矶 分 校 分 析 了 超过 1 ”000 起 帮派 犯罪 的 历史 数据 ， 以 及 10 年 间 
对 于 一 个 拥有 大 约 30 个 帮派 地 区 的 犯罪 嫌疑 活动 数据 的 记录 。 研 究 人 员 
可 以 通过 模型 来 判断 最 有 可 能 进行 新 犯 非 活动 的 前 三 个 帮派 ， 准 确 度 达 
80%» 


芋 克 鲁 效 大 学 的 研究 人 员 采 用 了 加 州 大 学 洛杉矶 分 校 的 男 一 个 模 
型 ， 通 过 圣 死 鲁 效 警 察 部 门 的 数据 来 监控 犯罪 行为 的 爆发 。 他 们 的 研 完 
发 现 ， 犯 徘 行为 的 发 生 与 地 震 后 余震 的 发 生 具 有 类 似 的 数据 模式 ， 该 发 
现 指 导 和 警方 在 最 有 可 能 发 生 犯 罪 的 区 域 部 署 人 员 。 


用 视频 监控 犯罪 


在 街道 上 安装 视频 监控 摄像 头 是 一 种 数据 密集 型 的 犯罪 信息 采集 手 
段 。 美 国 国土 安全 部 为 了 对 抗 念 怖 主义 的 威胁 ， 为 警察 部 门 安装 摄像 头 
提供 了 大 量 资助 ， 这 使 得 美国 运用 于 公共 安全 方面 的 摄像 头 数量 出 现 了 
井喷 。2009 年 ， 国 土 安全 部 为 其 城市 安全 项 目 (Urban Area Security 
Initiative) 在 7 个 城市 花费 了 1 500 万 美元 ， 该 项 目的 目的 是 为 了 在 城市 
地 区 ， 针 对 慌 怖 主义 行为 的 防范 、 应 对 和 重建 问题 ， 进 行规 划 部 晋 和 增 
训 。2010 年 ， 该 项 目 在 64 个 大 都市 区 花费 了 8.3 亿 美元 。2011 年 ，31 个 
城市 投入 共 使 用 了 6.62 亿 美元 的 项 目 资金 。 


关于 这 些 摄 像 尖 是 否 能 够 对 犯罪 行为 起 到 震慑 作用 ， 则 有 许多 不 同 
的 观点 。 南 加 州 大 学 2008 年 进行 的 一 项 研究 ， 通 过 对 洛杉矶 犯罪 视频 的 
分 析 发 现 ， 从 统计 上 来 看 ， 摄 像 头 并 不 能 显著 地 降低 暴力 和 财产 犯 徘 的 
发 生 。 同 样 的 ， 加 州 大 学 伯克利 分 校 在 2008 年 的 一 项 研究 中 也 认为 ， 旧 
金山 在 安装 摄像 涉 之 后 ， 容 力 犯 罪 的 发 生 并 未 减少 。 伦 敦 以 其 众多 公共 
摄像 头 而 闻名 ，2009 年 来 目 伦 敦 警方 的 一 份 内 部 报告 则 称 ， 摄 像 头 对 于 
帮助 抓 捕 罪犯 并 没有 什么 帮助 。 


但 城市 研究 所 2011 年 发 布 的 一 份 研究 报告 ， 通 过 分 析 芝 加 哥 、 巴 尔 
的 摩 和 华盛顿 特区 2001 年 以 来 的 历史 数据 ， Rae ont ea 
加 哥 的 监控 摄像 头 网 络 在 这 三 个 城市 中 覆盖 最 广 。 洪 堡 公 园地 区 安装 了 
摄像 头 后 ， 总 体 犯 罪 率 下 降 了 129%; 然而 芝加哥 的 另 一 个 地 区 ， 西 加 菲 
尔 德 公园 地 区 的 犯罪 率 没 有 变化 。 巴 尔 的 摩 市 的 三 个 被 研究 地 区 中 ， 一 
个 地 区 的 犯罪 率 下 降 了 259%， 另 一 个 下 降 了 10%， 剩 下 一 个 地 区 没有 下 
降 。 在 华盛顿 特区 则 没有 出 现 犯罪 率 下 降 。 该 研究 报告 的 作者 认为 ， 对 
Re 能 够 
移动 摄像 头 以 获得 最 大 视野 。 这 一 建议 点 明了 摄像 机 装置 以 及 维护 此 类 
数据 采集 的 重要 性 。 


如 何 获得 公众 数据 


尽管 对 普通 市 民 而 言 ， 他 们 并 没有 获取 公共 摄像 头 大 部 分 内 容 的 权 
限 ， 但 市 民 可 以 通过 诸如 crimereports.com 或 是 crimemapping.com 这 样 的 
网 站 连接 到 交通 摄像 头 、 网 络 摄像 头 以 及 匿名 的 犯罪 行为 数据 库 ， 这 些 
网 站 依靠 执法 部 门 提供 犯罪 数据 。 用 户 都 可 以 通过 这 两 个 网 站 看 到 不 同 
犯罪 行为 在 地 图 上 的 可 视 化 分 布 图 。 为 了 保护 犯罪 受害 人 的 隐私 ， 具 体 
地 址 被 隐藏 ， 所 以 案件 发 生地 的 数据 是 街区 层面 的 。 数 据 不 能 被 下 载 ， 

通过 技术 手段 抓 取 数 据 也 是 违犯 用 户 使 用 条 球 的 。 然 而 ， 在 
crimereports.com 的 网 站 上 ， 性 侵犯 案件 的 详细 信息 如 姓名 、 年 龄 和 地 址 
都 是 可 以 查看 的 。 


监控 的 合法 性 讨论 


当 交 通 摄像 头 被 安装 在 距 司机 有 一 定 距 离 的 位 置 时 ， 看 起 来 似乎 是 
无 害 的 ， 但 2004 年 美国 民权 同盟 就 此 抗议 ， 称 警方 可 以 使 用 这 些 实施 监 
控 的 交通 视频 数据 非法 拦截 车 辆 。 该 组 织 认 为 这 违犯 了 禁止 非法 追踪 和 
抓 捕 的 禁令 。 


近年 来 ， 开 始 出 现 一 种 新 类 型 的 道路 摄像 头 。 除 了 监控 交通 流量 
外 ， 邱 们 还 能 抓 担 芝 驶 员 面 部 和 汽车 牌照 ， 从 而 据 此 对 阔 红 灯 和 超速 行 
人 但 2007 年 明尼苏达 最 高 法 院 认为 在 红 灯 时 对 驾车 者 进行 提 
照 ， 侵 犯 了 司机 的 无 罪 推 定 权 “三 。 其 他 一 些 州 ， 包 括 威斯康星 、 西 弗 
吉 尼 亚 、 南 加 利 佛 尼 亚 、 新 罕 布什 尔 、 蒙 大 拿 和 密西西比 等 州都 禁止 使 
用 这 种 摄像 头 。 而 部 分 大 一 些 的 城市 如 芝加哥 、 巴 尔 的 摩 、 革 地 亚 哥 、 
波 特 兰 和 华盛顿 特区 等 ， 还 在 继续 使 用 红 灯 摄 像 头 ， 这 些 设备 通 币 都 是 
由 私营 企业 安装 和 维护 。 民 意 调查 显示 ， 这 些 城市 有 超过 半数 的 民众 赞 
同 使 用 这 类 摄像 头 。 


用 于 交通 和 犯罪 监控 的 公共 摄像 ， 或 统称 为 静默 视频 监控 ， 在 法 姓 
总 体 上 还 是 得 到 文 持 的 。1967 年 美国 最 高 法 院 在 联邦 宪法 第 四 修正 案 的 
基础 上 ， 通 过 “ 卡 欧 诉 美国 政府 ” 案 〈 美 国 最 高 法 院 判例 汇编 索引 号 : 
389 U.S. 347) 对 现代 意义 的 搜查 与 扣押 进行 了 定义 。 基 本 上 ， 在 公共 
道路 上 行走 或 站 在 公园 中 的 人 ， 其 活动 是 不 被 认为 具有 隐私 权 的 。 同 
样 ， 在 公共 道路 上 鸭 车 行驶 的 人 也 不 能 要 求 隐私 ， 他 是 可 以 被 监视 的 。 
因而 ， 在 道路 上 对 个 人 进行 公共 监控 就 是 可 行 的 。 


而 在 1993 年 的 “美国 政府 诉 谢 尔 曼 ?” 案 〈 索 引号 : 990 F.2d 1265) 
中 ， 这 类 监控 的 合法 性 得 到 进一步 强化 。 第 九 巡 回 上 诉 法 庭 认为， 在 公 
共 空 间 被 摄像 的 人 “不 应 期 符 获 得 隐私 权 ， 也 不 能 以 违犯 第 四 修正 案 为 
由 起 诉 政府 进行 影像 记录 的 行为 ”。 


在 公共 场所 使 用 摄像 头 的 合法 性 表明 ， 研 究 人 员 也 可 以 在 公共 空间 
目 行 安装 摄像 头 进行 相关 研究 。 实 际 上 ， 之 前 已 丝 有 在 大 学 校园 安装 摄 
像 头 进行 人 员 流 动 性 研究 的 先例 。 然 而 目 行 安装 摄像 头 的 花费 烦 大 ， 很 
多 在 项 目 中 使 用 摄像 头 的 研究 人 员 ， 都 是 使 用 提供 在 线 影 像 的 政府 资助 
和 运作 的 摄像 头 。 目 前 ， 利 用 网 络 摄像 头 的 研究 ， 大 多 数 是 依靠 远程 设 
置 的 摄像 头 追 踪 野 生动 物 或 进行 环境 观 训 。 


里 然 对 于 个 体 研究 人 员 或 企业 主 来 说 ， 想 要 获取 整个 城市 的 交通 和 
犯罪 数据 还 是 相对 困难 的 ， 但 是 他 们 可 以 选择 与 那些 采集 和 汇总 数据 的 
大 公司 合作 ， 或 者 与 警方 合作 以 获得 进入 历史 数据 库 的 权利 ， 或 利用 可 
以 公开 下 载 的 政府 数据 。 当 犯罪 数据 被 小 心意 惯 地 使 用 时 ， 不 仅 可 以 避 
免 侵 犯 个 人 隐私 ， 还 能 被 用 来 保护 城市 安全 。 


此 外 ， 研 究 人 员 还 可 以 在 特定 地 点 安装 〈 非 音频 的 ) 摄像 头 ， 目 行 
采集 城市 流动 性 数据 ， 尽 管 数据 样本 规模 较 小 。 但 即使 是 这 些 关 于 菏 一 
部 分 城市 生活 的 小 样本 ， 经 过 时 间 的 积累 ， 仍 然 可 以 提供 对 城市 的 深入 
认识 。 和 警力 和 交通 资源 可 以 据 此 在 城市 中 得 到 更 好 的 配置 ， 一 些 研究 人 
员 甚至 还 开始 利用 这 类 数据 监控 疾病 的 爆发 。 目 前 ， 对 犯罪 和 交通 数据 


的 利用 还 很 不 足 ， 它 们 其 实 可 以 让 城市 变 得 更 加 安全 和 宜 居 。 在 下 一 章 
中 ， 我 们 将 探索 在 这 些 数据 中 及 现 的 一 些 可 能 性 。 


1. [95 是 美国 95 号 州 际 公 路 的 缩写 ， 全 长 约 3 ”098 千 米 。 共 计 跨 越 15 州 ， 是 美国 东 岸 的 


交通 动脉 。 一 一 译 者 注 


2. 无 罪 推定 权 ， 指 任何 人 在 未 经 依法 判决 有 罪 之 前 ， 应 视 其 无 罪 ， 被 告 人 不 负 有 证 明 


自己 无 菲 的 义务 ， 被 告 人 有 提供 订 


E 明 和 有 利于 自己 的 说 


F 据 的 权力 。 一 一 编者 注 


BTN 
将 适合 的 资源 放 在 适合 的 位 置 


随 看 技术 的 发 展 ， 人 们 对 数据 的 分 析 能 力也 从 个 人 层面 扩展 到 整个 
城市 范围 。 有 些 人 对 竺 数据 集 的 态度 ， 就 如 算命 焉 师 面 对 水 唱 球 一 样 : 
似乎 提出 准确 的 问题 ， 未 来 就 会 展现 在 眼前 。 然 而 ， 即 便 拥有 了 大 数据 
和 有 效 的 分 析 手 段 ， 未 来 的 画面 也 不 会 那么 清晰 。 不 过 ， 城 市 规模 的 分 
析 给 我 们 提供 了 一 个 令 人 激动 的 机 遇 : 为 犯罪 和 交通 问题 建立 快速 适应 
系统 ， 这 样 你 的 预测 惑 可 以 在 这 些 领 域 发 挥 一 定 的 作用 。 


通过 分 析 犯 罪 数 据 中 的 趋势 ， 费 城 、 更 菲 斯 和 洛杉矶 的 警察 部 门 在 
此 基础 上 建立 了 一 个 能 够 在 案 发 前 对 警力 资源 进行 最 优 分 配 的 系统 。 这 
些 系统 分 析 的 结果 表明 ， 在 特定 区 域 只 要 有 警察 出 现 就 有 可 能 阻止 严重 
犯 徘 的 发 生 。 当 在 高 犯罪 地 区 以 一 种 不 威胁 那些 草 纪 和 守法 的 市 民 们 的 、 
温和 的 方式 布置 一 定 党 力 ， 这 些 犯 罪 预 测 系 统 束 可 以 让 社区 变 得 更 加 健 
康 而 且 安 全 。 


交通 预测 是 太一 个 有 发 展 前 景 的 领域 。 像 Inrix 和 谷歌 这 样 的 公司 将 
众多 的 数据 来 源 整 合 起 来 ， 以 更 好 地 预测 出 行 时 间 ， 同 时 也 不 断 更 新 实 
时 数据 ， 帮 助人 们 避免 拥 墙 或 事故 。 微 软 公司 的 研究 人 员 甚 至 可 以 通过 
交通 数据 ， 预 测 未 来 的 意外 交通 事件 。 正 是 因为 有 了 现实 挖掘 ， 我 们 才 
可 以 预测 意 想不到 的 事件 。 


但 是 交通 数据 并 不 仅仅 只 能 用 来 预测 交通 状况 。 城 市 规划 师 们 也 可 
以 用 这 些 数据 来 分 析 哪 些 道 路 和 交叉 口 存在 危险 需要 升级 ， 如 何在 紧急 
状况 下 最 快 芷 散人 群 等 问题 。 此 外 ， 交 通 数 据 也 可 以 用 来 生成 城市 及 周 
边 整体 机 动 性 的 乌 敬 视图， 让 我 们 看 到 城市 技 民 的 暂时 性 流动 。 


在 理解 城市 机 动 性 的 基础 上 ， 研 究 者 们 可 以 针对 疾病 传播 提出 一 些 
重要 的 问题 : 茶 个 病毒 是 在 何 处 起 源 的 ? 哪些 人 需要 被 隔离 ? 哪些 人 需 
要 被 注射 疫苗 ?一 些 研究 人 员 使 用 交通 数据 和 其 他 一 些 机 动 性 指标 ， 来 
更 好 地 理解 传染 病 在 城市 则 的 传播 (第 十 间 中 会 更 加 详细 地 讨论 在 全 球 
范围 内 对 疾病 发 展 的 妃 踪 )。 


本 章 主 要 讨论 在 城市 范围 进行 的 几 项 更 细致 入 微 、 简 单 预测 性 的 现 
实 挖掘 应 用 。 


交通 预测 和 意外 事件 控制 


Inrix 公 司 编写 了 一 套 基于 多 种 来 源 数据 的 算法 一 一 包括 手机 GPS 和 
无 线 定位 数据 、 和 车载 GPS 的 位 置信 息 、 道 路 感应 器 和 摄像 头 捕捉 到 的 信 
恩 、 历 史 交 通 数据 、 重 要 活动 安排 和 天 气 预报 信息 ， 纤 合 利 用 这 些 数 据 
来 判断 每 一 段 道 路 的 交通 流速 度 。 然 后 ， 该 公司 依据 这 些 信 息 来 计算 和 
估算 整个 行程 的 区 驶 时 间 。 此 外 ， 这 个 算法 还 通过 持续 监测 交通 流 ， 不 
断 更 新 估算 预测 结果 。 根 据 马 里 兰 大 学 和 I-95 廊 道 联合 组 织 共同 领导 的 
一 项 独立 研究 一 一 他 们 在 I-95 交 通 亡 道上 的 一 段 2 天 里 的 道路 上 设置 了 
固定 式 监 牙 感 应 器 ， 以 进行 交通 流 监测 《〈 详 见 第 五 章 ) ， 监 测 发 现 Inrix 
公司 的 速度 预测 精确 度 可 达 每 小 时 2 英里 且 预 测 同期 为 一 星期 7 天 ， 每 天 
24 小 时 不 中 断 。 


2008 年 ， 谷 歌 公 司 为 网 页 版 的 谷歌 地 图 产品 开发 了 一 个 新 功能 
预测 用 户 未 来 一 段 行程 所 需要 的 驾驶 时 间 。 如 果 你 想 知 道 去 见 医生 开车 
需要 多 久 ， 只 要 输入 约见 医生 的 日 期 和 时 间 ， 舍 歌 地 图 就 可 以 为 你 计算 
和 预测 。 但 是 这 个 功能 很 快 被 取消 了 ， 并 且 至 今 也 没有 重新 恢复 。 需 要 
指出 的 是 ， 现 在 苹果 和 安 日 手机 上 的 谷歌 地 图 应 用 都 可 以 估算 萄 驶 时 
间 ， 但 是 并 没有 可 以 估算 未 来 旅行 的 驾驶 时 间 的 功能 。 


尽管 这 些 交 通 预测 系统 已 经 相当 完善 ， 但 在 意外 情况 发 生 时 它们 还 
征 可 能 会 犯错 。 比 如 一 辆 运输 鸡 和 皇 的 货车 侧 翻 ， 或 是 一 次 临时 的 道路 管 
制 等 ， 这 样 的 道路 意外 事故 的 发 生 几 乎 无 法 预测 。 但 是 ， 微 软 公司 的 研 
完 人 员 探 索 出 了 一 种 方式 来 预测 什么 时 候 有 可 能 发 生 这 些 意外 ， 他 们 称 
之 为 “意外 事件 模型 "*。 这 项 技术 可 以 用 于 提升 交通 预测 的 精确 度 ， 也 可 
以 用 于 其 他 一 些 需 要 预测 的 领域 ， 比 如 健康 保健 、 军 事 战略 以 及 金融 市 


场 等 。 


意外 事件 模型 是 微软 一 个 名 为 SmartPhlow 的 软件 开发 项 目的 成 果 ， 
该 项 目 是 由 埃 里 克 : 霍 维 区 和 他 的 同事 们 于 2003 年 发 起 的 。 这 个 软件 可 
以 展示 公路 上 的 交通 流 状 况 ， 还 可 以 在 发 生意 外 事件 时 提醒 用 户 ， 比 如 
当 一 条 道路 被 临时 管制 ， 或 是 一 条 畅通 道路 突然 变 得 拥堵 。 研 究 人 员 通 
过 采集 使 用 西雅图 多 年 的 交通 数据 ， 将 事故 、 天 气 、 节 日 和 活动 数据 与 
之 进行 关联 分 析 ， 并 将 每 天 的 时 间 切 分 为 多 个 时 长 为 15 分 钟 的 片段 ， 对 
每 个 片段 的 交通 状况 分 别 进行 计算 。 他 们 特别 关注 数据 与 一 般 模 式 有 显 
著 差 异 的 情况 ， 即 异常 的 交通 状况 的 出 现 。 在 对 这 些 意外 事件 进行 标注 
Za, RAR REL) 异常 情况 发 生前 30 分 钟 内 的 事件 都 有 可 能 引发 
交通 异常 数据 的 出 现 。 然 后 ， 研 究 人 员 检 查 了 这 些 意外 事件 的 先决 条 件 
来 研究 其 中 是 否 存 在 一 定 的 关系 模式 。 该 项 研究 成 果 是 一 个 可 以 预测 大 
约 50% 的 道路 意外 事故 ， 但 会 有 5% 的 错误 率 的 软件 系统 。 


直路 资源 配置 


I_-95 是 一 条 连接 马里 兰 和 佛罗里达 的 两 北向 公路 。I-95 廊 道 联合 组 
织 作为 一 个 合作 机 构 ， 包 括 了 交通 部 门 ， 东 海岸 各 州 公共 安 全 组 织 、 港 
口 和 交通 运输 组 织 ， 蕊 里 兰 大 学 以 及 Inrix 公 司 。 自 2008 年 ，I-95 联 合 组 
织 已 经 开始 研究 如 何 将 海量 的 交通 数据 转变 为 可 以 改善 交通 网 状况 的 有 
用 信息 ， 并 开展 了 一 个 基于 车 载 GPS 等 公众 数据 的 ， 名 为 VPP (和 车辆 探 
AMA) 的 新 项 目 ， 并 计划 将 项 目 至 少 延 长 至 2014 年 。 


这 个 项 目的 目标 是 通过 诸如 I95travelinfo.net 和 511 一 类 的 网 站 和 电话 
服务 ， 为 驾驶 者 提供 更 加 准确 的 信息 ， 并 且 帮 助 城市 规划 机 构 更 好 地 进 
行 决策 。 比 如 ， 华 盛 顿 州 、 华 盛 顿 特区 以 及 费城 的 规划 师 就 在 使 用 VPP 
项 目 数据 来 评价 目前 公路 网 的 效率 。 这 是 通过 规划 改善 公路 状况 的 第 一 
步 ， 从 而 最 终 减 少 道路 拥堵 并 改变 整体 交通 模式 。 


VPP 项 目的 大 量 数据 还 可 以 帮助 紧急 啊 应 团队 更 快 到 达 事 故 现场 。 
例如 ，2008 年 10 月 一 次 突 发 的 暴风 雪 中 ， 新 诺 西 的 交通 管理 员 通 过 VPP 
数据 ， 发 现 了 80 号 州 际 公路 的 延伸 段 上 的 一 系列 事故 ， 从 而 快速 地 派出 
了 了 应急 处 理 团 队 ， 这 在 原本 基于 摄像 类 的 监控 系统 中 是 做 不 到 的 。 


县 和 州 政府 也 可 以 使 用 交通 数据 在 灾难 发 生 时 更 快 琉 散 民 众 。 佛 罗 
里 达州 是 个 很 好 的 例子 ， 这 里 每 年 都 会 有 数 次 飓风 光顾 ， 为 保证 灾害 期 
间 交 通 琉 散 得 平稳 流畅 ， 该 州 方面 主要 是 在 县 政府 层面 进行 协调 ， 男 一 
方面 与 州 政府 的 各 部 门 在 更 高 层面 进行 协调 。 


佛罗里达 州 的 政府 部 门 通过 实时 交通 数据 ， 可 以 获知 灾害 期 间 市 民 
的 驾车 行动 方向 ， 并 通知 邻近 的 县 和 州 ， 以 保障 足够 的 资源 。 此 外 ， 在 
特别 拥堵 的 下 散 路 段 可 以 实施 “逆行 ?的 方式 ， 引 导 玻 散人 和 群 癌 其 他 玻 散 
路 线 或 紧急 避难 所 方向 前 进 。 


可 退 踊 的 病 


大 量 交 通 数据 带 来 的 另 一 个 好 处 是 ， 我 们 可 以 以 乌 梧 视角 观察 城市 
中 人 们 的 流动 方式 ， 这 对 于 流行 病 学 家 来 说 极 具 价值 。 研 究 人 员 如 今 通 
过 交通 数据 ， 来 追踪 人 们 以 及 他 们 可 能 携带 的 病菌 是 如 何在 城市 中 移动 
的 。 


城市 流动 性 数据 可 以 用 于 疾病 传播 模型 ， 以 评估 疾病 是 从 何 处 友 源 
的 ? 将 传播 到 哪些 地 方 ? 以 及 将 以 什么 样 的 速度 传播 ? 这 些 信息 可 以 进 


一 步 被 用 于 制订 合理 的 隔离 和 接种 疫苗 方案 ， 以 及 将 医疗 人 员 等 资源 在 
正确 的 时 间 配 置 到 正确 的 地 点 。 


包括 亚 历 山 德 多: 韦 斯 度 尼 亚 尼 和 德 殉 ' 布 多 克 受 在 内 的 许多 研究 

者 ， 都 利用 交通 数据 对 不 同 空 间 范围 上 的 疾病 传播 网 络 中 的 流动 性 进行 
建 模 。 韦 斯 皮 尼 亚 尼 和 他 的 同事 们 友 现 ， 城 市 范围 的 地 面 通勤 与 豚 空 运 
输 的 交通 流 有 所 不 同 。 城 市 范围 的 通勤 交通 与 空中 交通 相 比 ， 具 有 数量 
级 上 的 强度 更 高 ， 这 表明 城市 范围 内 人 们 有 越 来 越 多 样 化 的 互动 和 联 
系 。 这 一 发 现 强调 了 理解 不 同 范围 流动 性 数据 之 间 细 微 兰 别 的 重要 性 。 
韦 斯 皮 尼 亚 尼 和 他 的 同事 们 提出 ， 全 球 疾病 网 络 模型 中 应 该 包括 城市 范 
围 的 模型 ， 从 而 使 总 体 模型 更 加 精确 并 提供 多 层次 的 粒度 。 


预防 犯 非 


内部 门 当 然 有 采集 犯 罪 数据 的 职责 : 案件 报告 中 需要 包括 非法 嫌 
内 容 、 事 件 、 地 点 以 及 发 生 原 因 等 记录 。 过 去 的 10 年 
里 ， 很 多 这 类 犯罪 数据 部 被 电子 化 了 ， 这 束 为 数据 挖掘 提供 了 可 能 性 ， 
从 中 得 到 的 模式 可 以 帮助 警察 部 门 做 出 更 好 的 决策 ; 比如 周 五 的 晚上 应 
该 将 警车 小 到 哪些 地 段 ， 或 者 像 一 场 周 日 足球 赛 这 种 重大 活动 应 该 配置 
多 少 警力 。 


纽约 市 的 数字 化 犯罪 统计 系统 Compstat 是 个 很 好 的 例子 ， 它 从 1994 
年 开始 投入 使 用 ， 如 今 已 经 在 全 美 多 个 城市 中 得 到 应 用 。Compstat 主 要 
奶 踪 被 记 录 的 非法 活动 中 的 长 期 趋势 。 宣 兰 元 林 : 齐 姆 林 在 他 2011 年 出 
版 的 著作 《更 加 安全 的 城市 》 中 提出 ，Compstat 在 过 去 几 十 年 里 对 纽约 
犯罪 率 的 下 降 具 有 积极 的 影响 。 通 过 Compstat 系 统 ， 和 警察 部 门 可 以 在 预 
计 可 能 发 生 犯 罪 的 地 方 配置 更 多 的 警力 。 


在 过 去 的 10 年 中 ， 很 多 警察 部 门 都 受到 了 Compstat 系 统 的 影响 ， 但 


也 推动 了 该 系统 的 新 进展 。 然 而 ，Compstat 数 据 一 直 只 能 用 于 每 周 的 战 
上 略 部 和 车 讨 论 ， 而 且 需 要 依 绯 入 们 来 识别 数据 中 的 模式 。 现 在 有 一 些 新 的 
犯罪 奶 躁 系统 可 以 每 日 更 新 ， 并 依 徘 算 法 儿 乎 实时 地 预测 未 来 可 能 的 犯 
罪 。 


2004 年 ， 来 自 卡 内 基 - 梅 隆 大 学 的 研究 人 员 与 匹兹堡 警察 部 门 合 
作 ， 开 展 了 实时 犯罪 追踪 的 很 多 基础 研究 工作 。 杰 奎 琳 .科恩 、 威 鹏 : 戈 
尔 以 及 安 德 烈 亚 斯 : 奥 利 希 施 勒 格 尔 杭 理 了 [匹兹堡 市 从 1991 年 1 月 到 1998 
年 12 月 间 的 130 万 份 案件 报告 记录 的 犯罪 数据 ， 包 括 从 盗 鳃 到 谋杀 的 16 
种 犯罪 类 型 。 研 究 者 希望 能 提前 一 个 月 预测 城市 中 可 能 发 生 的 犯罪 活 
动 ， 并 在 一 个 划分 为 104 个 地 块 单元 的 网 络 系 统 中 预测 其 可 能 的 位 置 ， 
这 些 单 元 每 个 覆盖 大 约 在 100 个 街区 的 范围 。 


研究 人 员 发 现 ， 他 们 可 以 找到 与 严重 犯罪 活动 相关 的 其 他 犯罪 指 
标 ， 并 确定 这 些 指 标的 影响 程度 。 利 用 这 些 信息 ， 他 们 开发 了 一 个 预测 
模型 ， 帮 助 警 方 决 定 应 该 问 哪 里 分 派 警 力 ， 哪 里 的 警力 应 该 被 撤回 。 因 
为 人 们 普 壳 认为， 警察 的 存在 可 以 有 效 预防 更 多 犯 徘 的 发 生 。 这 个 模型 
主要 依靠 犯罪 活动 之 间 的 相关 性 进行 预测 。 研 究 人 员 认 为 ， 传 统 方法 仅 
仅 根 据 蛙 一 犯罪 类 型 进行 趋势 分 析 ， 而 他 们 的 相关 犯罪 模型 与 传统 推断 
方法 相 比 具有 显著 提升 。 


虽然 匹兹堡 和 纽约 的 犯罪 率 是 有 所 下 降 的 ， 但 在 圣 克 鲁 效 市 却 在 上 
升 。2000~2011 年 ， 该 市 的 犯罪 数量 上 升 ， 而 更 不 幸 的 是 ， 由 于 州 预 算 
和 城市 预算 的 曾 减 ， 警 察 数量 反而 在 减少 。2011 年 ， 圣 元 重 效 市 的 警察 
部 门 开始 与 乔治 : 蒂 塔 、 乔 治 : 莫 勒 、 马 丁 . 肖 特 ， 以 及 杰 夫 : 布 兰 廷 汉 姆 
等 研究 人 员 合作 ， 开 发 并 测试 了 一 个 有 效 的 犯罪 预测 系统 ， 以 协助 警察 
安排 更 高 效 的 日 钊 巡逻 。 研 究 人 员 将 城市 划分 为 500 英 尺 〈 约 152 米 ) 见 
方 的 网 格 ， 并 标注 上 过 去 8 年 对 元 鲁 效 的 案件 报告 数据 。 与 纽约 的 
Compstat 系 统 不 同 ， 这 个 系统 每 日 更 新 数据 。 并 且 ， 它 还 采用 了 以 前 用 
于 预测 地 震 余 震 的 计算 机 模型 ， 并 将 其 很 好 地 应 用 于 预测 犯罪 活动 ， 警 


方 可 以 通过 这 个 系统 得 到 每 日 更 新 的 犯罪 热点 地 区 。 据 说 ， 这 个 系统 或 
多 或 少 降低 了 犯罪 发 生 的 频率 。 然 而 ， 在 本 书写 作 时 “(2013 年 ) ， 还 没 
有 最 终 的 分 析 结 论 。 


与 圣 克 鲁 效 一 样 ， 和 孟菲斯 市 在 21 世 纪 也 经 历 了 犯罪 率 的 上 升 。 但 由 
于 政府 工资 冻结 和 预算 紧缩 ， 没 法 座 用 更 多 的 警察 来 履 盖 更 多 的 城市 范 
围 ， 所 以 ， 在 2005 年 更 菲 斯 警察 部 门 开 始 与 IBM 公 司 合作 ， 开 发 了 第 五 
章 中 提 到 的 “Blue CRUSH” 系 统 。 这 个 系统 使 用 了 过 去 10 年 中 的 案件 报 
告 数据 ， 以 及 现在 警察 的 手持 数字 设备 中 的 实时 更 新 数据 。 基 于 这 些 数 
据 ， 系 统 建立 了 犯罪 活动 、 位 置 和 其 他 一 些 变量 ， 如 废弃 房屋 之 间 的 相 
关 性 。 除 了 协助 警方 安排 巡逻 地 区 外 ， 这 个 系统 还 能 帮助 更 加 有 效 地 安 
装 安 全 监控 摄像 头 ， 因 为 它 可 以 分 析 在 哪些 地 点 需要 安装 摄像 头 ， 哪 些 
时 间 需 要 特别 监控 。 在 使 用 Blue CRUSH 系 统 后 ， 和 孟菲斯 市 的 严重 犯罪 
活动 数量 总 体 下 降 了 30%， 暴 力 犯罪 则 减少 了 159%。 


很 明显 ， 还 有 很 多 不 同 的 方法 和 模型 可 以 用 于 犯罪 数据 分 析 ， 它 们 
的 选择 取决 于 警察 部 门 需要 解决 什么 类 型 问题 ， 以 及 需要 配置 哪些 资 
源 。 除 了 可 以 减少 犯罪 活动 的 发 生 ， 这 些 系统 还 可 以 协助 城市 政府 部 门 
更 加 合理 有 效 地 分 配 警 力 资源 ， 特 别 是 在 圣 克 鲁 效 和 雷 菲 斯 这 种 城市 预 
算 有 限 的 情况 下 。 


交通 和 犯 徘 数 据 都 很 适用 于 建 模 和 预测 。 帮 助 建立 更 好 的 足 散 人 
群 、 应 对 又 急 情 况 以 及 奶 踪 传染 病 的 扩散 机 制 ， 只 是 交通 数据 的 少数 几 
种 用 处 。 突 发 事件 建 模 ， 最 初 被 用 于 预测 意外 交通 状 况 ， 之 后 也 被 应 用 
于 犯罪 事件 等 其 他 领域 。 


以 何 种 方式 来 应 用 犯罪 预测 系统 ， 以 及 该 系统 将 如 何 影 响 高 犯罪 率 
社区 ， 是 开发 该 系统 时 需要 特别 注意 的 两 点 。 对 于 警方 来 说 ， 根 据 直觉 
和 工作 经 验 安排 区 车 或 步行 的 巡逻 路 线 ， 并 前 往 淤 在 犯罪 居民 区 或 大 楼 
巡视 ， 并 不 是 一 件 新 鲜 事 。 但 是 ， 安 排 警 力 在 特定 地 点 守 株 待 锡 ， 等 符 
事件 发 生 就 是 新 鲜 事 了 。 如 有 果 没 有 恰当 的 培训 和 监管 ， 这 些 系统 可 能 会 


被 用 来 对 市 民 进 行 定 义 和 分 类 ， 从 而 可 能 打扰 普通 的 市 民 ， 甚 至 导致 不 
必要 的 抓 捕 。 犯 徘 预 测 系统 的 作用 和 潜力 令 人 印象 深刻 ， 这 些 系统 必然 
获得 更 多 关注 。 而 当 它 们 被 广泛 使 用 时 ， 如 何 合理 运用 系统 尤为 重要 。 
或 许 在 这 些 新 撤 术 全 面 铺 开 之 前 ， 可 以 让 社区 负责 人 参与 到 这 些 扩 术 使 
用 的 讨论 中 来 。 这 样 做 不 仅 能 听 到 普通 民众 的 忧虑 并 建立 彼此 的 信任 ， 
还 能 借助 基层 居民 的 深刻 见解 提高 犯 非 数据 的 真实 度 。 通 过 检查 非法 活 
动 数 据 在 现实 中 的 真实 状况 ， 建 立 一 个 相互 尊重 的 沟通 方式 ， 将 是 保证 
犯罪 预测 系统 项 目 整 体 成 功 运 行 的 有 效 方 式 。 


当 现 实 挖掘 的 规模 继续 扩大 时 ， 国 家 政府 、 大 型 企业 和 国际 组 织 
就 开始 在 数据 的 采集 、 编 辑 和 传播 上 扮演 重要 的 角色 。 在 国家 层面 
上 ， 研 究 人 员 和 企业 可 以 获得 更 大 范围 的 数据 来 源 ， 包 括 国家 人 口 普 
查 、 通 话 记录 、 主 要 互联 网 公司 如 谷歌 、 脸 谱 网 、 推 特 每， 以 及 有 限 
的 一 些 银行 数据 。 
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第 七 章 
当 数 据 上 升 至 国家 层面 


当 现 实 挖掘 的 规模 继续 扩大 时 ， 国 家 政府 、 大 型 企业 和 国际 组 织 就 
开始 在 数据 的 采集 、 编 辑 和 传播 上 扮演 重要 的 角色 。 在 国家 层面 上 ， 研 
完 人 员 和 企业 可 以 获得 更 大 范围 的 数据 来 源 ， 包 括 国家 人 口 普 查 、 通 话 
记录 、 主 要 互联 网 公司 如 谷歌 、 脸 谱 网 、 推 特等 ， 以 及 有 限 的 一 些 银 行 
数据 。 当 然 ， 这 些 数 据 来 源 中 有 些 相 对 比较 容易 获得 ， 有 些 则 相对 困 
难 。 


到 目前 为 止 ， 人 口 普查 数据 是 最 容易 获取 的 。 很 多 国家 把 他 们 的 人 
口 普查 结果 通过 网 络 向 公众 公布 ， 这 些 数 据 可 以 被 下 载 、 可 视 化 以 用 于 
更 深入 的 研究 。 力 外 ， 世 界 银 行 开展 的 国际 研究 将 所 有 参与 国 的 人 口 普 
但 数据 汇编 在 一 起 ， 对 其 所 有 成 员 国 来 说 束 像 一 个 一 站 式 的 信息 商店 。 


这 些 数 据 是 完全 公开 的 ， 人 们 可 以 下 载 并 被 独立 地 分 类 和 分 析 。 重 要 的 
是 ， 世 界 银行 提供 了 开放 的 应 用 程序 编 程 接 口 ， 让 软件 开发 者 可 以 将 各 
种 数据 整合 到 应 用 软件 中 。 合 歌 束 将 世界 银行 的 数据 整合 进 一 个 简单 的 
可 视 化 工具 ， 显 示 在 其 搜索 结果 中 ， 比 如 搜索 博 次 瓦 纳 的 人 口 时 ， 将 会 
显示 世界 银行 提供 的 历史 数据 ， 以 及 展示 人 口 数 十 年 来 变化 的 图 表 。 


另外 一 个 新 兴 的 数据 来 源 是 通话 数据 记录 ， 或 通话 细节 记录 ， 它 们 
统一 缩写 为 CDRs。CDRs 数 据 特别 有 助 于 了 解 人 口 在 一 个 国家 或 一 个 区 
域内 的 流动 性 。 然 而 ， 与 人 口 普查 数据 和 世界 银行 数据 所 不 同 的 是 ， 
CDRs 数 据 对 于 普通 的 企业 和 研究 人 员 来 说 很 难 获取 。 


作为 一 个 数据 集 ， 一 条 CDR 中 包含 了 通信 记录 (通话 和 短信 ) 以 及 
事务 性 事件 ， 包 括 呼 叫 方 或 发 送 方 、 接 收 方 以 及 时 间 、 地 点 、 通 话 时 长 
等 信息 。 以 往 ，CDRs 数 据 仅 被 用 于 账单 事务 ， 但 2005 年 开始 ， 网 络 服 
务 提 供 商 和 大 学 的 研究 人 员 开 始 意 识 到 这 些 数据 的 价值 ， 特 别 是 对 于 人 
口 流动 性 的 建 模 。 一 些 研究 人 员 、 企 业 与 移动 运营 商 签 订 了 协议 ， 可 以 
在 一 定 限制 条 件 下 使 用 他 们 的 数据 。 一 些 移动 运营 商 愿 意 分享 匿 名 的 
CDRs 数 据 ， 只 要 法 定 协 议 中 详细 规定 不 可 以 公开 所 有 权 以 及 个 人 信 
恩 。 这 些 协议 的 附加 条 天 往往 会 规定 研究 人 员 需 要 问 运 营 商 展示 他 们 打 
算 做 的 研究 的 价值 ， 比 如 ， 一 个 预测 性 “搅动 ”模型 的 开 及 ， 涉 及 的 古 终 
止 订阅 和 产品 接纳 情况 。 


在 国家 层面 上 ， 我 们 也 同样 强调 主要 网 络 数据 采集 商 一 一 谷歌 、 脸 
谐 网 和 推 竺 的 重要 性 。 这 些 公 司 对 使 用 它们 的 个 人 、 社 区 以 及 政府 都 产 
生 了 深远 的 影响 ， 但 它们 作为 大 量 数据 采集 工具 的 功能 ， 在 国家 层面 上 
变 得 更 为 明显 。 互 联网 公司 采集 数据 的 一 个 显著 应 用 就 是 定 同 广告 。 但 
这 些 数据 还 有 很 多 未 开发 的 可 能 性 ， 包 括 定向 的 市 场 调 研 和 疾病 追踪 
( 详 见 第 十 革 〉 。 推 特 的 设计 理念 ， 是 让 大 多 数 用 户 所 输入 的 内 容 能 够 
实时 公开 显示 ， 它 可 以 被 用 来 追踪 民众 的 情绪 ， 也 可 以 被 用 来 奶 踪 国家 
灾难 或 者 其 他 危机 发 生 时 的 资源 分 配 。 


一 些 关 于 谷歌 、 脸 谱 网 和 推 特 的 应 用 会 在 第 八 章 中 详细 讨论 ， 还 有 
一 些 将 在 第 十 章 中 突出 强调 ， 因 为 这 些 国 际 公司 在 全 球 层面 上 也 有 很 大 
的 影响 。 实 际 上 ， 本 书 的 第 四 部 分 和 第 五 部 分 提 到 的 一 些 数据 类 型 ， 比 
如 CDRs 数 据 、 网 络 公 司 拥有 的 数据 集 、 银 行 数据 等 ， 都 可 以 在 国家 层 
面 和 国际 层面 采集 ， 并 在 之 后 被 应 用 于 这 两 个 规模 层面 。 本 章 初 步 展 示 
了 可 以 在 国家 层面 采集 的 一 些 数 据 ， 并 讨论 了 如 何 处 理 这 些 数据 。 我 们 
同样 关注 隐私 问题 ， 特 别 是 在 匿名 CDRs 数 据 的 应 用 上 。 尽 管 匿 名 记录 
上 的 个 人 识别 信息 被 剥离 ， 但 通过 与 一 些 诸如 人 口 普 查 数 据 等 0 
获取 的 信息 进行 交叉 分 析 ， 还 是 有 可 能 还 原 个 人 识别 信息 的 。 我 们 介 
了 目前 正在 开发 的 一 he te de an ds 
CDRs 数 据 的 同时 保持 它们 的 匿名 性 。 


当今 世界 的 大 多 数 国 家 都 有 人 口 普查 ， 其 中 多 数 国 家 通过 网 络 公 开 
发 布 这 些 数 据 。 例 如 ， 美 国政 府 通 过 一 个 名 为 美国 事实 查找 需 
(American Fact Finder) .三 的 网 站 公布 人 口 普 碍 数据 。 人 们 可 以 在 该 
网 站 通过 主题 〈 如 年 龄 和 收入 ) ， 地 理 《〈 如 州 和 和 郡 ) ， 种 族 、 民 族 或 部 
沙 ， 产 业 、 产 品 或 商品 名 称 进行 搜索 。 在 人 口 普 查 数据 之 外 ， 人 们 还 可 
以 下 载 其 他 的 研究 数据 ， 包 括 每 5 年 开展 一 次 的 经 济 普查 ， 还 有 人 口 预 
测 项 目 ， 该 项 目 公 布 最 新 的 各 乡镇 、 城 市 、 州 和 国家 的 人 口 预测 数据 。 


2009 年 ， 美 国政 府 启 动 了 一 个 名 为 data.gov 的 在 线 数据 库 ， 提 供 来 
自 各 个 政府 机 构 的 超过 445 ”000 条 原始 数据 和 地 理 空间 数据 集 ， 所 含 门 
类 包含 商业 、 艺 术 、 娱 乐 和 出 行 、 选 举 、 对 外 援助 、 交 通 、 福 利和 其 
他 ; 这 些 数据 集 有 “性 别 / 种 族 发 展 趋 势 ”* 美 国 的 活跃 矿区 和 矿井 ”野马 
和 野 驴 数量 统计 等。 这些 数据 可 以 XMI、 文 本 或 CSV、KMIKMZ、 
Feeds、XIS 和 ESRI 的 Shapefile 格 式 下 载 。 此 外 ， 还 有 一 些 常 用 的 交互 数 


据 集 拥 有 自己 的 应 用 程序 编程 接口 ， 开 发 人 员 能 够 把 数据 生成 的 地 图 和 
图 表 整 合 到 网 页 应 用 中 。 


世界 银行 是 国家 层面 公共 数据 的 一 个 巨大 的 来 源 。 这 个 国际 机 构 提 
供 的 数据 目录 包括 数据 库 、 预 定义 格式 的 表格 、 报 告 以 及 其 他 资源 。 总 
体 上 ， 该 网 站 提供 超过 7 ”000 个 指标 的 下 载 ， 涵 盖 了 从 农业 土地 比例 到 
受 教育 比例 等 各 方面 数据 。 另 外 ， 该 网 站 提供 超过 200 个 国家 和 经 济 体 
的 数据 ， 从 主题 上 分 有 健康 、 气 候 变 化 等 ， 从 指标 上 分 则 包括 国内 生产 
总 值 、 汽 油价 格 等 。 


世界 银行 发 展 数据 中 心 三 整合 了 数据 采集 和 统计 分 析 ， 并 维护 世 
界 银行 ， 用 于 制订 援助 计划 、 评 估 贫 困 程 度 以 及 开展 研究 的 一 系列 数据 
库 。 大 部 分 数据 来 自 187 个 成 员 国 ， 它 们 和 世界 银行 及 其 合作 伙伴 共同 
致力 于 改善 国家 统计 系统 的 能 力 、 效 率 和 效力 。 


世界 银行 宣称 ， 它 们 采用 的 是 目前 可 能 的 ， 最 专业 的 数据 标准 来 运 
营 ， 使 用 两 大 主要 框架 来 评估 数据 统计 系统 : 一 般 数据 发 布 系统 和 数据 
质量 评估 框架 ， 两 者 部 是 和 国际 货币 基金 组 织 共同 研发 的 。 然 而 ， 世 界 
银行 也 承认 数据 集 也 存在 不 一 致 现象 ， 因 为 不 同 的 参与 国 数据 统计 的 时 
间 和 编制 报告 的 方法 不 同 :， 所 有 数据 都 是 通过 传统 调研 的 方式 获得 ， 从 
而 导致 数据 集 的 数量 相对 较 少 。 因 此 ， 世 界 银 行 建议 在 组 合 数据 集 的 时 
候 要 多 加 小 心 。 就 其 本 身 而 言 ， 世 界 银行 提供 了 一 套 整 合 经 济 数 据 、 增 
长 率 计 算 以 及 受 汇率 影响 的 换算 系数 的 方法 ， 这 使 得 路 数据 集 的 比较 尽 
可 能 的 精确 。 


世界 银行 的 网 站 除了 搜索 数据 集 和 下 载 表格 外 ， 用 户 还 可 以 通过 三 
个 不 同 的 应 用 程序 编程 接口 来 接 入 数据 : 一 个 接 入 指标 ， 一 个 接 入 项 目 
(世界 银行 运营 的 数据 ， ， 还 有 一 个 接 入 世界 银行 的 金融 数据 。 这 些 接 
口 使 应 用 程序 可 以 在 可 调节 参量 范围 内 通过 子 碍 询 引用 超过 3 ”000 个 指 
标 。 世 界 银行 提供 的 应 用 程序 编程 接口 可 以 获取 近 50 年 间 的 许多 数据 


集 ， 并 包括 了 已 经 结束 的 项 目 、 活 跃 的 项 目 和 正在 进行 的 项 目的 数据 。 


谷歌 在 一 个 名 为 谷歌 公共 数据 管理 器 的 可 视 化 和 比较 工具 中 整合 了 
世界 银行 的 数据 ， 让 用 户 可 以 对 来 自 世 界 银行 的 数据 和 其 他 60 个 不 同 公 
共 数 据 集 的 数据 进行 交叉 分 析 。 然 而 ， 要 进行 更 复杂 的 分 析 的 话 ， 用 户 
必须 单独 访问 每 个 数据 集 各 目的 来 源 网 站 。 


通话 记录 


为 了 给 客户 生成 账单 并 了 解 其 网 络 上 的 通话 负载 ， 移 动手 机 网 络 服 
务 商 会 记录 它们 用 户 的 手机 使 用 情况 。CDRs 数 据 中 包含 了 一 个 通话 或 
- 段 短 消息 发 送 的 时 间 、 大 概 位 置 ( 通 过 通信 基站 的 编号 ) 及 其 接收 者 
等 信息 。 因 为 当今 世界 手机 高 度 普及 ，CDRs 数 据 对 于 人 口 流动 性 研 完 
来 说 是 非常 有 吸引 力 的 位 置信 息 来 源 。 另 外 ，CDRs 数 据 提 供 的 位 置信 
恩 价 格 便宜 ， 尤 其 古 与 需要 耗费 大 量 人 力 的 小 规模 调研 相 比 。 


近年 来 ， 网 络 服务 供应 商 、 大 学 以 及 初创 公司 的 研究 人 员 开 始 注意 
到 这 种 类 型 的 数据 对 人 口 流动 性 和 社交 网 络 研究 模型 的 影响 (第 八 章 介 
绍 了 基于 CDR 模 型 的 特定 应 用 程序 ) 。 然 而 ， 对 于 大 多 数 研究 人 员 和 企 
业 来 说 ， 获 取 这 类 CDRs 数 据 是 一 个 极 大 的 挑战 。 出 于 隐私 考虑 并 依照 
所 有 权 规 定 ， 移 动 运营 商 不 能 对 公众 公开 它们 的 数据 。 因 此 ， 如 果 一 个 
研究 人 员 想 要 获取 这 些 数据 ， 他 需要 能 够 提供 特定 的 研究 拉 术 来 改善 模 
型 ， 或 是 提供 对 于 运营 商 来 说 有 价值 的 其 他 东西 ， 比 如 评价 一 个 客户 终 
止 他 的 移动 服务 的 可 能 性 。 如 果 研 究 人 员 或 企业 进行 CDRs 数 据 研究 的 
日 的 不 能 直接 满足 移动 运营 商 的 需求 ， 那 么 他 们 可 能 需要 额外 花 后 研究 
时 间 为 运营 丙 提 供 直接 援助 。 


移动 运营 商 在 分 有 享 这 些 数据 上 犹豫 原因 ， 部 分 来 和 目 与 公众 相关 的 隐 
私 考虑 。 而 且 这 些 犹豫 有 充分 的 理由 。 首 先是 2005 年 ，《 纽 约 时 报 》 了 皮 


光 了 一 个 经 美国 政府 批准 ， 出 于 国家 安全 的 考虑 对 AT&T 的 CDRs 数 据 进 
行 挖掘 的 项 目 ， 然 后 是 近 几 年 揭露 的 美国 国家 安全 局 PRiSM 数 据 挖 掘 项 
目 。 于 是 ， 从 2005 年 开始 ， 这 些 数据 的 敏感 性 进入 了 公众 视野 。 由 此 引 
发 了 一 些 诉 讼 ， 一 部 分 案件 中 政府 被 认定 为 非法 监视 ， 另 外 一 些 则 由 于 
技术 细节 被 推翻 。 


尽管 政府 无 证 搜索 特定 客户 的 CDRs 数 据 与 研究 人 员 通 过 CDRs 数 据 
对 人 们 的 群体 行为 进行 建 模 不 同 ， 移 动 运营 商 仍 然 对 广泛 公开 这 些 数据 
很 谨慎 。 即 便 大 的 数据 集 都 是 匿名 的 ， 并 且 诸 如 手机 识别 码 和 手机 号 码 
的 客户 识别 信息 被 剥离 ， 个 人 的 识别 信息 仍然 有 可 能 被 重新 获得 。 以 往 
研究 显示 ， 即 便 很 多 敏感 信息 如 名 字 、 地 址 和 社会 保险 号 码 不 可 获取 ， 
通过 另 一 些 识别 信息 ， 例 如 性 别 、 生 日 、 邮 政 编码 ， 一 个 人 还 是 可 能 被 
识别 出 来 。 通 过 这 三 个 识别 信息 与 人 口 普 查 数据 交叉 分 析 ，639%6~879%6 
的 美国 人 口 (取决 于 人 口 普 查 年 份 ) 可 以 被 分 别 识别 出 来 。 


在 一 个 对 CDRs 数 据 记 录 去 匿名 化 的 案例 中 ，Sprint 公 司 的 研究 人 员 
使 用 的 数据 集 履 盖 了 美国 超过 50 个 州 的 2 500 万 手机 用 户 所 拨打 的 300 亿 
通电 话 。 研 究 人 员 推 新 每 个 用 户 的 常用 地 点 ， 并 将 其 与 公开 的 普查 数据 
相关 联 。 研 究 人 员 得 到 的 结论 是 ， 只 要 有 足够 的 时 间 通 过 手机 位 置 来 推 
断 常 用 地 点 ， 例 如 “家 ”和 “单位 >， 基 本 上 所 有 的 用 户 都 能 被 识别 出 来 。 
他 们 建议 ， 为 了 保证 数据 的 匿名 性 ， 至 少数 据 的 时 间 和 空间 信息 必须 模 
糊 。 这 意味 着 数据 最 好 是 在 一 天 之 内 被 采集 ， 而 不 是 经 过 一 个 月 ， 并 且 
不 宜 采集 超过 一 个 通信 基站 所 履 盖 地 理 范 围 的 数据 。 


AT&T 的 研究 人 员 试 图 让 这 些 使 得 CDRs 数 据 变 得 有 价值 的 信息 可 以 
被 大 众 获取 ， 但 同时 注重 保护 隐私 。 普 林 斯 顿 大 学 的 希 伯 伦 : 易 了 村 曼 和 
AT&TI 的 拉 受 . 卡 竖 雷 斯 以 及 他 们 的 同事 合作 的 一 个 项 目 叫 作 
WHeRe 〈“ 从 区 域 中 找 出 单位 和 家 庭 2 的 缩写 ) ， 致 力 于 为 特定 城市 开发 
手机 用 户 的 合成 模型 。 通 过 使 用 AT&T 实 证 数据 中 提取 的 空间 输入 记录 
和 时 间 可 能 性 分 布 数据 ，WHeRe 可 以 为 综合 手机 用 户 们 创建 数据 。 合 


成 CDRs 数 据 和 被 应 用 在 纽约 和 洛杉矶 大 都 市 区 ， 并 且 通 过 了 这 这 两 个 城市 
中 数 十 万 手机 所 产生 的 数 十 亿 的 匿名 位 置 样本 的 验证 。 这 些 合成 的 
CDRs 数 据 的 主要 优点 是 ， 它 们 维护 了 个 人 的 隐私 ， 因 为 没有 一 个 数据 
古 从 真正 的 用 户 而 来 。 另 外 ， 研 究 人 员 宣 称 WHeRe 比 其 他 手机 数据 建 
模 的 方法 更 精确 。 例 如， 每 天 活动 的 范围 落 在 真实 范围 的 一 英里 范围 
内 。) 尽管 在 这 个 研究 阶段 仍然 有 很 多 需要 做 的 ， 但 这 类 项 目 会 让 人 们 
获得 更 多 的 CDRs 数 据 类 型 。 


谷歌 、 脸 详 网 、 推 特 


对 这 三 个 网 络 巨 头 不 需要 任何 介绍 ， 但 本 小 节 要 提 到 三 者 采集 的 一 
些 特定 数据 ， 以 及 总 体 来 说 三 者 之 间 获 取 这 些 数据 的 不 同方 式 。 谷 歌 的 
数据 采集 在 早期 就 已 经 进行 了 扩张 ， 那 时 他 们 仪 仪 监控 用 户 的 搜索 词 。 
因为 它 现 在 拥有 并 运营 一 系列 不 同 种 类 的 网 络 服务 ， 包 括 Gmail 电 子 邮 
件 、 谷 歌 + 社交 网 络 、Youtube 视 频 网 站 以 及 Chrome 浏 览 嚣 ， 相 比 以 
前 ， 它 获取 了 更 多 个 人 用 户 的 数据 。 如 果 Chrome 浏 览 器 的 “即时 ”功能 被 
打开 ， 谷 歌 公 司 就 会 记录 用 户 在 搜索 栏 输入 的 搜索 词 和 网 址 。 另 外 ， 出 
于 广告 目的 ， 谷 歌 还 记录 用 户 所 观看 的 Youtube 视 频 ， 在 Googlet+ 上 的 操 
作 ， 以 及 通过 Gmail 发 送 邮件 的 文本 内 容 。 


普通 人 不 能 挖掘 全 部 的 谷歌 搜索 词 和 用 户 数据 ， 但 有 一 些 方法 
可 别 的 数据 。 例 如 ， 通 过 加 入 谷歌 的 AdSense 广 告 服 
务 ， 人 们 可 以 深入 了 解 某 些 通过 Gmail 发 送 或 接收 的 电子 邮件 中 可 能 
现 的 特定 的 词 或 短语 。 个 人 可 以 通过 互联 网 服务 商 进 行 查 阅 ， 获 取 在 
Gmail 中 收 到 这 些 广告 的 人 数 以 及 他 们 的 位 置信 息 ， 借 此 在 使 用 这 些 词 
或 短语 的 广告 竞价 中 胜出 。 通 过 这 种 方法 ， 人 们 可 以 了 解 特定 的 电子 邮 
件 流 行 语 ， 并 有 可 能 发 现 不 同 国家 的 趋势 或 流行 观点 。 


与 谷歌 相似 ， 脸 谱 网 也 提供 广告 网 络 。 当 你 发 布 一 个 广告 的 时 候 ， 


你 选择 想 要 关联 的 关键 词 ， 这 则 广告 会 随 之 出 现在 个 人 信息 中 包含 这 些 
关键 词 的 人 的 页 面 上 。 因 为 锁定 广泛 的 人 口 统计 资料 或 获取 个 人 资料 上 
的 个 别 信 息 ， 如 地 址 (市 、 州 、 省 或 国家 ) 、 人 口 信息 年 龄 屋 、 性 

别 、 语 言 、 感 情 状 况 ) 、 兴 趣 爱好 、 教 育 和 工作 状况 等 ， 都 是 有 可 能 

的 。 尽 管 脸 谱 网 并 没有 辐 广 告发 布 者 提供 浏览 广告 的 脸谱 网 用 户 的 个 人 
信息 ， 但 广告 商会 获得 与 广告 条 件 相 匹 配 的 用 户 数量 量 级 。 


AdSense 和 脸谱 网 广告 都 有 两 种 收费 方式 : 通过 每 次 点 击 付费 以 及 
每 和 干 次 浏览 付费 。 两 者 都 可 以 通过 各 目 公司 的 网 页 竞价 购买 。 这 两 家 公 
司 提供 广告 的 衡量 数据 ， 对 试 儿 卖 产 品 或 服务 的 人 来 说 很 有 用 。 这 些 衡 
量 数据 包括 广告 被 点击 的 次 数 ， 广 告 在 不 考虑 点 击 时 被 展示 给 用 户 的 次 
数 《 浏 览 )， 厂 告 获取 的 点 击 量 除 以 广告 展示 量 ( 点 击 率 ) ， 以 及 每 获 
得 一 次 点 击 需 要 付 多 少 钱 (平均 点 击 付 费 ) 。 两 家 公司 同样 也 都 提供 总 
体 统计 数据 ， 比 如 一 个 广告 出 现在 电子 邮件 或 个 人 页 面 的 总 数 。 这 个 信 
息 可 以 用 于 判断 不 同人 口 对 于 某 个 产品 的 大 体 观 点 。 


脸 详 网 同样 提供 一 个 应 用 程序 编程 接口 ， 以 便 应 用 开发 者 在 开发 应 
用 程序 的 时 候 调 用 脸谱 网 的 用 户 信息 。 从 这 些 应 用 程序 中 ， 应 用 开发 者 
可 以 获取 一 个 脸谱 网 用 户 在 隐私 设置 中 允许 显示 的 所 有 信息 ， 包 括 手 机 
号 码 、 联 系 人 清单 、 状 态 更 新 以 及 其 他 个 人 识别 信息 。 


一 些 最 受 欢迎 的 脸谱 网 应 用 ， 比 如 由 社交 游戏 公司 星 佳 开发 的 那 
些 ， 不 仅仅 包含 个 人 信息 识别 ， 同 时 还 采集 玩家 的 行为 和 习惯 。 数 以 百 
计 的 手机 应 用 拥有 多 达 百 万 的 用 户 ， 这 在 很 大 程度 上 是 由 于 它们 提供 的 
东 个 特定 功能 会 病毒 式 的 传播 ， 或 者 是 可 以 提供 特别 令 人 满意 的 结果 。 
简单 地 设计 一 球 采 集 信 息 的 应 用 远 远 不 够 ， 它 必须 变 得 足够 受 欢 迎 ， 才 
能 提供 足够 样本 数量 以 满足 使 用 。 然 而 ， 手 机 应 用 很 难 获得 显著 规模 的 
样本 群 。 


推 特 跟 谷歌 以 及 脸谱 网 都 有 很 大 的 不 同 ， 它 的 大 多 数 用 户 数 据 是 公 
开 的 。 推 特 提供 一 个 名 为 “Twitter fire hose” 的 应 用 程序 编程 接口 ， 可 以 


获取 连续 的 数据 流 。 由 于 部 分 推 文 三 包含 位 置信 息 ， 这 些 数 据 流 可 以 
用 于 发 掘 一 个 国家 的 民众 情绪 。 第 八 章 中 更 深入 地 介绍 了 专门 分 析 推 特 
数据 的 应 用 程序 ， 以 及 如 何 利用 它们 发 现 国家 层面 上 的 趋势 。 然 而 ， 推 
特 数 据 的 分 析 所 面临 的 最 大 挑战 是 如 何 从 巨大 的 数据 流 中 找到 有 用 的 内 
容 。 推 文 包含 大 量 无 意义 的 内 容 ， 比 如 对 话 的 片段 、 链 接 、 混 杂 的 标签 
以 及 缩写 等 ， 这 些 对 于 分 析 来 说 都 是 挑战 。 


银行 交易 


银行 交易 是 力 一 个 国家 层面 的 信息 来 源 ， 但 需要 注意 的 是 商业 交易 
的 数据 基本 上 不 可 能 被 获取 。 银 行 常 常 使 用 数据 分 析 来 预防 诈骗 ， 或 预 
测 某 个 人 更 换 银行 的 可 能 性 ， 或 者 根据 个 人 消费 习惯 和 风险 承受 能 力 调 
整 利率 。 对 于 研究 人 员 和 企业 来 说 ， 客 户 的 花 销 数据 能 够 为 迁移 紊 以 及 
打上 略 制定 的 研究 提供 深刻 见解 。 因 为 位 置 是 与 购物 这 个 特定 的 行为 结合 
在 一 起 的 ， 所 以 研究 人 员 可 以 借 此 对 一 个 人 的 经 济 行为 有 更 全 面 的 了 
解 ， 甚 至 提供 一 些 CDRs 数 据 无 法 提供 的 信息 。 


2008 年 美国 银行 和 麻 省 理工 学 院 合作 ， 让 研究 人 员 调 查 前 者 包含 
800 万 条 客户 交易 的 数据 库 。 凯 瑟 琳 : 克 鲁 姆 关注 的 是 包含 一 万 名 客户 在 
2006~2009 年 交易 的 子 样本 ， 主 要 指标 包括 交易 数据 、 总 量 ， 是 否 使 用 
支票 、 借 记 卡 或 贷 记 卡 ， 商 户 ， 丙 户 类 别 码 ， 以 及 交易 是 在 线 交 易 还 是 
线 下 交易 等 。 研 究 中 涉及 的 交易 总 额 达 到 每 月 300 亿 ~350 亿 美元 。 


这 类 数据 不 是 那些 有 求知 欲 的 研究 人 员 在 实验 室 中 每 天 都 能 得 阅 的 
数据 。 但 像 北 卡罗来纳 州 的 Tresata 公 司 这 类 目标 明确 的 初创 企业 ， 有 可 
能 可 以 成 为 大 银行 的 合作 伙伴 ， 提 供 专门 针对 金融 业 的 结构 化 和 非 结构 
化 数据 进行 数据 分 析 的 平台 。 


Intuit 公 司 旗下 的 金融 公司 Mint 在 金融 交易 数据 流 中 也 占有 一 席 之 


地 ， 这 家 公司 提供 的 客户 产品 能 直接 将 客户 连接 到 线 上 消费 追 踩 系 统 。 
Mint 拥 有 超过 400 万 用 户 ， 并 能 将 个 人 消费 模式 可 视 化 ， 以 及 提供 信用 
卡 等 产品 的 促销 信息 。 同 时 它 还 可 以 直接 获取 自家 百 万 级 别 客户 的 交易 
信息 。 通 过 这 些 信息 ， 该 公司 在 推广 产品 时 就 可 以 根据 个 人 的 消费 模式 
有 的 放 和 天 。 而 且 通 过 这 400 多 万 用 户 的 交易 数据 ， 该 公司 可 以 对 经 济 的 
健康 程度 进行 综合 判断 ， 并 且 除 了 对 某 个 客户 信用 卡 使 用 兴趣 这 类 简单 
推 关 之 外 ， 在 更 大 层面 上 进行 一 些 预 测 。 


尽管 想 要 获取 公开 发 布 数 据 以 外 的 数据 并 不 容易 ， 但 仍然 有 机 会 。 
虽然 对 大 多 数 人 来 说 通话 数据 记录 都 无 法 获得 ， 但 因为 越 来 越 多 的 手机 
运营 商 看 到 了 与 初创 企业 进行 合作 的 价值 一 一 后 者 可 以 为 运营 商 的 记录 
提供 深刻 见解 ， 就 像 有 些 大 学 也 已 经 开始 进行 的 类 似 合作 ;因此 通话 记 
录 目 前 已 经 可 以 在 有 限 范围 内 被 共享 。 像 WHERE 这 样 可 以 生成 合成 数 
据 集 的 项 目 ， 如 果 能 够 超越 城市 界限 被 广泛 应 用 的 话 ， 也 将 成 为 一 个 重 
要 工具 。 


谷歌 和 脸谱 网 癌 有 兴趣 打造 广告 并 愿意 为 广告 付费 的 公司 或 个 人 提 
供 他 们 所 需 的 数据 。 这 些 广告 基本 上 都 是 面向 大 范围 跨 区 域 中 使 用 特定 
搜索 词 或 拥有 特定 兴趣 的 人 。 跨 人 口 、 路 区 域 的 高 度 具 体 化 数据 ， 目 前 
还 是 一 个 相对 屎 开发 的 资源 。 同 样 的， 推 迁 已 提供 更 多 有 价值 的 现 有 信 
恩 ， 里 然 这 些 数据 的 分 析 挑 战 更 大 。 


大 银行 数据 可 能 是 这 个 层面 上 最 难 获取 的 数据 ， 然 而 ， 移 动 运营 商 
模型 有 可 能 也 可 以 应 用 于 金融 业 ， 如 采 该 行业 和 那些 可 以 提供 茶 些 价值 
的 研究 人 员 及 初创 企业 合作 。 人 金融 机 构 可 能 会 发 现 一 些 现 实 挖掘 从 业者 
能 提供 有 用 的 合成 金融 数据 集 。 尽 管 大 金融 数据 目前 仍然 不 适合 用 于 范 
围 很 广 的 应 用 程序 ， 但 可 以 肯定 的 是 ， 这 些 数据 绝对 有 可 利用 的 空间 。 
同样 的 ， 当 这 个 层面 上 越 来 越 多 的 数据 和 被 应 用 ， 数 据 卫 士 们 可 能 会 进 一 
步 开放 数据 的 获取 途径 。 下 一 章 将 会 讨论 这 类 数据 的 一 些 可 能 性 应 用 的 
ATS 


更 多 信息 见 http://factfinder.census.gov/faces/nav/jsf/pages/index.xhtml。 


更 多 关于 世界 银行 发 展 数据 中 心 的 信息 见 http://data.worldbank.org/about/development- 
data—group。 


推 文 ， 指 在 推 特 上 发 的 内 容 ， 包 括 文 字 、 图 片 等 。 编者 注 


第 八 草 
让 大 数据 友 挥 作用 的 最 佳 方法 


国家 数据 库 对 于 理解 怎样 进行 资源 分 配 和 设计 政策 非常 重要 。 但 更 
重要 的 是 要 找到 让 数据 发 挥 作用 的 最 佳 方 法 。 和 人口 普查 、data.gov 网 站 
以 及 世界 银行 的 数据 都 提供 了 关于 国家 规模 人 口 的 重要 解读 ， 但 这 些 观 
点 往往 是 静态 的 。 这 些 资源 由 于 受到 传统 的 数据 采集 技术 的 限制 ， 提 供 
的 只 是 数据 在 一 定时 间 和 地 点 条 件 下 的 简单 描述 。 通 过 数据 的 可 视 化 ， 
如 时 间 线 、 地 图 、 图 表 等 ， 政 集 制定 者 以 及 非 政府 组 织 可 以 看 到 这 些 大 
量 的、 动态 的 数据 如 何 通 过 不 同 的 方法 被 划分 、 切 割 、 交 又 引用 。 数 据 
可 视 化 的 结果 可 以 被 用 于 为 贫穷 和 饥饿 的 人 群 提供 更 好 的 服务 ， 更 好 地 
理解 选民 行为 ， 以 及 对 之 前 被 掩盖 的 行业 进行 早期 投资 。 


通过 可 视 化 来 发 现 这 些 潜在 的 应 用 有 很 多 方式 。 谷 歌 提供 了 一 个 名 
为 “谷歌 公共 数据 管理 器 ”的 工具 ， 使 用 世界 银行 以 及 其 他 数据 集 ， 让 人 
们 对 一 段 时 间 内 不 同 的 统计 数据 进行 比较 。Data.gov 网 站 链接 了 很 多 美 
国政 府 和 非 政府 组 织 的 可 视 化 数据 ， 并 常 将 这 些 数 据 在 地 图 上 进行 登 
加 。 


一 个 名 为 Development Seed 的 数据 可 视 化 组 织 ， 相 较 于 其 他 数据 来 
源 选 择 了 使 用 世界 银行 的 数据 ， 并 创建 了 一 个 互动 地 图 。 而 它 的 子 计 划 
Mapbox， 则 让 其 他 人 可 以 通过 开放 数据 简单 快速 地 制作 互动 地 图 。 
Development Seed 组 织 进行 的 数据 可 视 化 通常 有 特定 的 目标 ， 如 “识别 关 
键 问题 、 用 战略 思维 发 掘 机 会 、 建 立 解 决 方案 及 设计 交流 ”。 例 如 ， 他 
们 的 可 视 化 项 目 关 注 非 洲 之 角 饥 饿 问题 的 发 展 趋势 ， 以 及 阿富汗 的 公平 
选举 。 


在 国家 层面 ， 数 据 集 之 间 的 一 个 主要 不 同 点 是 它们 的 更 新 速度 。 人 
口 普查 数据 和 世界 银行 的 数据 更 新 得 很 慢 ， 然 而 ， 手 机 数据 的 更 新 则 非 
常 快 。 第 七 章 提 到 的 CDRs 数 据 能 够 近乎 实时 地 提供 人 们 的 移动 性 信 
恩 。 将 这 些 新 的 移动 性 信息 和 手机 CDRs 的 历史 数据 结合 起 来 ， 工 程 师 
可 以 获得 人 口 移 动 和 活动 网 络 的 总 体 情况 。 通 过 这 些 信息 ， 类 似 将 贫 
宣 的 人 口 流动 和 主要 粮食 的 价格 相关 联 的 一 类 研究 就 成 为 可 能 。 这 个 模 
型 最 终 可 用 于 辅助 预测 人 口 的 大 量 涌 入 ， 从 而 帮助 管理 者 在 正确 时 间 正 
确 地 点 分 配 正确 的 资源 。 


本 章 除了 探索 人 口 普查 数据 和 CDRs 数 据 的 综合 运用 之 外 ， 还 介绍 
了 使 用 谷歌 和 脸谱 网 的 广告 网 络 来 实时 发 掘 国家 层面 多 数 派 观点 的 方 
法 。 从 菏 种 角度 来 说 ， 这 种 方法 像 是 建立 了 一 个 个 人 的 民意 调研 一 一 提 
出 一 个 特别 的 问题 ， 并 使 其 合 有 能 够 使 人 想起 你 的 广告 的 搜索 词 或 关键 
字 ， 然 后 只 需要 简单 地 监控 相关 指标 即 可 。 通 过 这 种 方法 ， 人 们 可 以 通 
过 创建 一 系列 的 单 变量 民意 测验 来 获得 茶 个 特定 人 群 的 观点 和 感受 。 比 
如 说 ， 人 们 可 能 会 跟踪 那些 在 茶 个 特定 的 政治 候选 人 脸谱 网 页 面 上 
扩 “ 赞 "的 人 。 


男 外 ， 本 间 还 介绍 了 联合 国 的 全 球 脉动 项 目 ， 该 项 目 通 过 采集 推 特 
公司 的 全 球 第 四 大 市 场 印度 尼 西亚 的 推 文 信 息 ， 来 更 好 地 了 解 当地 居民 
承受 的 压力 。 通 过 推 文 内容 分 析 ， 这 个 项 目 可 以 分 析 人 们 有 关 燃 料 、 食 
物 、 债 务 以 及 其 他 能 暗示 压力 的 因素 ， 从 而 预测 危机 。 


最 后 ， 我 们 讨论 了 新 兴 的 金融 数据 分 析 领 域 的 应 用 。 相 对 难以 获得 
的 金融 数据 ， 特 别 是 那些 实时 采集 和 分 析 的 数据 ， 可 以 展现 一 个 国家 即 
时 的 经 济 健康 状态 和 福利 状况 。 
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国家 制定 公共 政策 时 ， 拥 有 不 同 区 域 的 需求 、 资 源 以 及 人 口 组 成 等 
大 量 的 数据 是 很 重要 的 。 


世界 银行 有 200 多 个 国家 提供 的 超过 7 000 个 指标 ， 涵 盖 了 从 教育 水 
平 到 军费 开 文 等 多 个 方面 ， 从 中 获取 最 重要 的 信息 可 能 会 有 一 定 的 困 
难 。 为 了 乔 明白 这 些 数据 集 ， 世 界 银行 提供 了 应 用 程序 编程 接口 ， 让 其 
他 机 构 甚 至 个 人 软件 开发 者 都 可 以 接 入 这 些 数 据 。 谷 歌 的 公共 数据 管理 
铝 是 一 个 方便 接 入 和 使 用 的 例子 ， 通 过 把 世界 银行 的 数据 和 其 他 60 个 公 
开 数 据 集 相 结合 ， 谷 歌 的 这 个 互动 工具 可 以 让 人 们 看 到 一 段 时 间 内 的 发 
展 趋势 ， 也 可 以 比较 不 同 的 国家 和 不 同 的 统计 数据 ， 还 可 以 回答 诸 
如 “哪个 国家 的 识字 率 正 在 提高 ? ”“ 这 会 怎样 影响 GDP 的 改变 ? ”之 类 的 
问题 。 


华盛顿 市 的 一 个 数据 可 视 化 组 织 Development Seed 采 用 的 方法 和 谷 
歌 不 同 ， 它 们 关注 某 些 特定 的 问题 ， 并 创建 风格 化 、 视 觉 上 引人入胜 的 
地 图 和 图 表 。 另 外 ，Development Seed 网 站 的 开发 设计 人 员 与 合作 机 构 
紧密 互动 ， 力 求 寻找 以 可 视 化 回答 问题 的 最 佳 途 径 ， 并 最 终 影响 到 政策 
制定 。 该 组 织 最 近 的 产品 是 Mapbox 应 用 程序 ， 该 程序 是 研究 者 为 了 使 
不 同 的 开放 数据 能 够 更 容易 、 更 快捷 地 被 公众 获取 所 做 的 一 项 尝试 。 


Mapbox 项 目的 一 个 很 有 分 量 的 案例 惑 是 对 非洲 之 角 2011 年 大 饥 欧 
的 影响 进行 的 制图 ， 这 次 大 饥 元 是 由 干旱 、 冲 突 以 及 食物 价格 上 涨 等 多 
方 因素 共同 造成 的 ， 它 影响 了 1 ”300 万 人 口 。 它 使 用 了 来 自 美国 国际 开 
发 普 和 联合 国人 道 主 义 事务 协调 厅 的 数据 ， 该 组 织 创 建 了 当前 以 及 预计 
的 饥 充 程度 和 和 王 旱 状况 的 地 图 。 这 些 地 图 可 以 被 修改 ， 这 样 人 们 就 可 以 
在 已 有 的 内 容 上 增加 不 同 的 信息 图 层 。 但 其 主要 目的 是 让 更 多 的 人 了 解 
这 次 饥 苑 ， 并 号 召 人 们 辐 世 界 粮食 计划 署 为 这 次 特定 的 需求 捐 钱 。 


记者 和 政策 制定 者 一 样 ， 在 众多 指标 中 ， 都 对 能 够 反映 社会 进步 或 
者 止步 不 前 ， 人 口 的 总 体 变 化 ， 经 济 ， 政 治 面 貌 ， 宗 教 信仰 等 的 发 展 趋 
势 以 及 历史 数据 感 兴 趣 。Development Seed 组 织 和 美国 公共 广播 电台 合 
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示 美 国 的 人 口 变 化 情况 。 这 类 数据 在 政治 、 社 会 或 经 济 事 件 的 报道 中 很 
重要 ， 它 们 可 以 提供 观点 支撑 以 及 事件 背景 。 


Development Seed 组 织 的 另 一 个 项 目 是 基于 美国 的 机 会 指数 创建 的 
互动 地 图 ， 它 展示 了 各 州 、 郡 在 不 同 指标 下 的 不 同 表现 ， 这 些 指标 包括 
失业 率 、 家 性 收入 、 高 速 网 络 订 购 水 平 、 受 教育 水 平 、 志 愿 服务 水 平 以 
及 获取 健康 食物 的 便利 度 。 这 些 指标 最 终 可 以 用 于 帮助 人 们 选择 工作 迁 
居 地 ， 并 鼓励 政府 或 企业 在 不 同 部 门 推行 改进 计划 。 


Development Seed 组 织 还 创建 了 一 个 气候 变化 地 图 ， 展 示 了 未 来 的 
全 球 温 度 和 降雨 量变 化 情况 。 当 将 这 些 预测 和 世界 银行 的 产业 类 型 以 及 
特定 区 域 的 人 均 收 入 数据 结合 起 来 时 ， 这 个 地 图 就 可 以 被 用 来 预测 气候 
变化 相关 的 经 济 问 题 ， 包 括 类 似 洪 水 这 样 的 自然 灾害 ， 以 及 导致 作物 鞭 
收 这 样 的 农业 气象 灾害 等 。 


当今 世界 ， 对 于 寻求 减轻 气候 变化 带 来 的 严重 后 果 的 活动 家 、 科 学 
家 以 及 政治 家 来 说 ， 当 地 图 和 其 他 与 气候 变化 相关 的 数据 来 源 结合 在 一 
起 的 时 候 ， 可 以 成 为 一 个 更 有 力 的 工具 。 而 在 一 些 气 候 变 化 会 带 来 较 大 
影响 的 地 区 ， 有 些 投资 人 看 到 了 新 的 商机 ， 也 可 以 利用 这 些 数据 。 比 
如 ， 对 于 建造 堤坝 和 其 他 防洪 设施 的 建设 公司 来 说 ， 海 平面 上 升 就 是 个 
好 消息 。 然 而 ， 总 体 上 来 说 ， 这 些 地 图 和 数据 集 具 有 打破 国界 的 潜力 ， 
可 以 被 用 来 促进 降低 温室 气体 的 排放 和 开发 对 气候 影响 较 小 的 技术 。 


人 口 流动 数据 的 重要 意义 


尽管 人 口 普 碍 数据 、 世 界 银行 以 及 其 他 政府 数据 集 ， 对 揭示 缓慢 变 
化 的 社会 和 经 济 趋 势 很 重要 ， 但 这 些 数据 缺乏 粒度 和 时 效 性 。CDRs 数 
据 可 以 填补 这 些 空缺 。 因 为 CDRs 数 据 能 够 提供 粗略 的 移动 状态 和 一 整 


个 国家 和 地 区 的 社交 网 络 ， 它 们 可 以 用 于 人 类 行为 的 建 模 ， 从 而 快速 识 
别 行为 变化 ， 并 且 预 测 未 来 的 行为 改变 。 使 用 CDRs 数 据 的 基础 研究 可 
以 识别 人 们 在 现实 生活 中 ， 与 其 他 人 建立 联系 的 模式 以 及 他 们 出 行 的 方 
式 ， 最 终 ，CDRs 数 据 的 相关 分 析 可 以 应 用 在 特定 的 场景 分 析 中 。 例 
如 ，CDRs 数 据 可 以 帮助 政府 部 门 更 好 地 了 解 贫 民 宣 等 临时 居住 地 的 动 
态 :以 促进 更 好 地 分 配 资源 ;还 可 以 用 于 预测 诸如 地 震 之 类 的 目 然 灾 害 
会 对 这 些 居住 地 产生 什么 样 的 影响 。 


2007 年 和 2008 年 ， 艾 伯 特 : 拉 斯 洛 : 巴 拉巴 斯 和 他 的 同事 在 《自然 》 
杂志 上 发 表 的 两 篇 被 广泛 引用 的 论文 ， 就 是 关于 CDRs 数 据 比 较 有 影响 
力 的 早期 研究 。 这 两 篇 论文 阐释 了 CDRs 数 据 可 用 于 人 类 社交 网 络 以 及 
移动 性 动态 研究 的 潜力 。 


2007 年 的 项 目 使 用 了 未 公开 服务 商 提供 的 超过 40 亿 用 户 的 匿名 通话 
记录 ， 来 研究 社交 网 络 的 进化 。 通 过 这 些 数据 ， 研 究 人 员 研究 了 小 规模 
AR CWA. Stk. BVI) 和 大 规模 人 群 〈《 比 如 学 校 、 机 构 和 公 
司 这 类 人 口 组 成 相互 重 登 的 社区 ) 一 段 时 间 内 的 不 同 动态 。 如 果 在 给 定 
的 时 间 段 中 ， 已 有 成 员 和 家 和 葵 代 得 越 少 ， 那 么 小 规模 和 群体 就 越 稳 定 ; 而 大 
规模 群体 反而 在 经 历 规模 和 构成 波动 的 情况 下 更 加 稳定 。 


2008 年 的 研究 关注 的 是 10 万 个 匿名 手机 用 户 的 移动 动态 。 以 前 ， 人 
类 的 移动 性 预测 一 般 用 列 维 飞行 (Levy fight) “三 和 随机 游 走 模型 来 假 
设 一 个 人 活动 的 时 空 规律 。 从 CDRs 中 采集 的 位 置 数据 显示 ， 尽 管 不 同 
的 人 过 去 的 出 行 模式 不 同 ， 从 个 人 的 角度 来 说 ， 人 们 倾 癌 于 追寻 简单 、 
可 重复 的 移动 模式 。2010 年 ， 巴 拉巴 斯 和 他 的 同事 在 《科学 》 杂 志 刊 登 
了 一 篇 论文 表明 ， 即 便 出 行 的 频率 、 出 行 目 的 地 不 同 ，93% 的 人 的 出 行 
征 可 以 被 预测 的 。 而 且 即 使 是 那 种 出 行 最 没有 规律 的 人 ， 研 究 者 通过 
CDRs 数 据 模 型 ， 至 少 可 以 预测 其 80% 的 出 行 。 


巴 拉 巴 斯 及 其 同事 的 研究 揭示 了 CDRs 数 据 集 的 巨大 潜能 。 当 应 用 


到 真实 生活 中 的 问题 时 ，CDRs 数 据 可 以 解释 清楚 用 其 他 方式 很 难 调研 
的 社会 、 环 境 ， 或 者 经 济 状况 。 


全 世界 有 超过 10 亿 人 生活 在 20 万 个 贫民 罕 、 人 口 密 集 且 上 及 脏 的 贫 
区 域 、 破 败 失修 的 临时 住所 ， 以 及 其 他 非 正 式 的 居住 环境 中 。 这 些 居 民 
中 使 用 手机 的 有 数 亿 人 。 因 此 ， 可 以 通过 手机 数据 来 掌握 这 些 居住 在 贫 
民 罕 中 的 人 每 日 、 每 月 和 每 年 的 移动 模式 。 这 些 移动 模型 可 以 帮助 确认 
并 改善 现 有 的 贫民 向 动态 理论 。 比 如 ， 人 贫民窟 中 的 人 口 流 动 会 怎样 影响 
附近 的 城市 ? 是 什么 让 贫民 宣 中 的 人 口 增加 或 是 减少 ? 通过 这 些 问 题 的 
答案 ， 不 同 机 构 可 以 分 别 找到 帮助 人 们 的 方法 ， 或 者 设计 有 效 的 诱导 机 
制 帮 助人 们 找到 更 长 久 的 住所 。 


埃 米 : 维 索 洛 夫 斯 基 和 内 牺 : 伊 格 尔 通过 手机 记录 研究 了 位 于 和 内罗毕 
市 中 心 西南 的 基 贝 拉 贫 民 罕 ， 这 也 是 世界 上 最 大 的 贫民 窟 之 一 。 研 究 人 
员 发 现 了 人 们 进入 或 迁 出 基 贝 拉 的 迁移 模式 ， 这 让 他 们 可 以 推 关 其 居民 
的 工作 的 地 点 和 部 落 的 从 属 关 系 。 一 个 怀 人 的 发 现 是 : 贫民 宣 中 的 居民 
的 迁移 率 很 高 ， 接 近 一 半 的 居民 每 个 月 换 一 个 夜间 居住 地 点 。 当 试图 推 
断 居民 的 新 居所 的 位 置 、 部 落 关 系 、 工 作 区 域 时 ， 研 究 人 员 发 现 每 个 月 
的 此 类 信息 很 少 有 重合 的 时 候 。 研 究 者 将 众人 在 白天 聚集 的 一 些 地 方 
一 一 很 可 能 是 他 们 的 工作 地 点 ， 称 为 “经 济 跳板 ”， 并 且 长 期 监测 这 些 地 
ae 
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动态 的 预测 模型 。 比 如 ， 可 以 预测 新 贫民 宣 的 位 置 ， 或 是 一 个 贫民 定 是 
怎样 发 展 起 来 的 ， 以 及 贫民 宣 对 周边 城市 区 域 的 发 展会 产生 怎样 的 影 
啊 。 当 地 政府 可 以 分 配给 贫民 定居 民用 于 保障 其 福利 的 ， 只 有 少量 的 宝 
贯 资源 。 对 贫民 证 将 会 如 何 随时 间 变 迁 有 更 好 的 了 解 ， 有 助 于 城市 管理 
者 确定 固定 基础 设施 投资 的 最 佳 位 置 ， 比 如 确定 哪里 适合 安装 下 一 条 讲 
水 管道 ， 或 是 哪里 适合 设置 一 个 新 的 公共 厕所 。 


除了 提供 针对 像 贫 民 罕 这 样 长 期 间 题 的 移动 模型 ，CDRs 数 据 还 可 


以 用 来 研究 如 何 采 用 最 佳 方式 来 应 对 像 地 震 这 样 的 严重 灾难 。 伊 格 尔 和 
他 的 同事 分 析 了 2008 年 2 月 在 刚果 民主 共和 国 基 伍 湖区 域 发 生地 震 时 通 
话 记录 中 的 变化 。 在 此 研究 中 ， 一 个 基线 活动 的 CDRs 数 据 变化 被 用 于 
确定 地 震 发 生 的 时 间 以 及 震中 所 在 地 ， 并 找 出 反常 通话 行为 持续 存在 的 
区 域 ， 这 些 区 域 可 能 正 是 需要 援助 的 区 域 。CDRs 数 据 可 以 用 于 灾害 分 
析 表 明 自 然 灾 害 的 预测 性 分 析 可 能 可 以 依靠 现 有 的 电信 基础 设施 来 进 
行 ， 这 使 人 们 制订 缓解 灾害 带 来 的 饥 荡 和 疾病 传播 的 事前 预案 成 为 可 


全 已 
月 上。 


2012 年 ， 在 撒哈拉 沙漠 以 南 的 非洲 大 陆 ， 症 疾 导 致 了 超过 100 万 名 5 
岁 以 下 的 儿童 死亡 。 当 地 政府 和 健康 组 织 没有 成 功 抑制 该 疾病 的 一 个 主 
要 原因 ， 是 没有 深入 了 解 症 疾 感 染 者 是 如 何在 区 域内 医疗 不 足 的 非 正式 
社区 中 迁移 的 。 在 一 次 史无前例 的 数据 分 译 合 作 中 ， 肯 尼 亚 卫 生 部 、 妆 
地 移动 运营 了 商 以 及 一 些 世界 最 知名 的 准 疾 专家 都 参与 其 中 ， 伊 格 尔 和 他 
的 合作 者 得 到 了 令 人 信服 的 证 据 ， 证 实 了 在 定量 分 析 准 原虫 在 区 域 寄 主 
人 和 群 中 传播 时 ， 手 机 数据 是 最 准确 的 方法 。 


现在 ， 人 们 已 经 可 以 衡量 国家 层面 上 人 的 迁移 率 、 规 模 和 方向 。 手 
机 数据 结合 详细 的 寄生 虫 风险 地 图 ， 让 研究 人 员 有 史 以 来 首次 可 以 确定 
一 个 给 定 区 域 招 致 汇 疾 的 风险 ， 从 根本 上 确定 左 疾 发 生 的 热点 区 域 。 发 
现 并 疾 热 点 改变 了 疮 疾 防 控 资 源 在 整个 衣 尼 亚 的 分 配方 式 ， 政 府 部 门 现 
在 按照 新 的 战略 部 车 大 量 根除 闪 疾 的 资源 ， 这 些 新 战略 相 较 于 传统 战 
略 ， 包 含 了 对 人 们 的 真实 移动 模式 的 数据 分 析 结 果 。 研 究 人 员 将 传染 性 
疾病 包括 准 疾 的 专业 知识 与 手机 数据 相 结合 ， 创 建 了 一 个 成 功 奶 踪 和 预 
汕 疾 病 传播 的 新 方式 ， 使 得 资源 分 配 更 乔 意 、 更 有 效 。 


让 广告 更 聪明 


当 多 数 人 想 通 过 谷歌 和 脸谱 网 做 宣传 时 ， 他 们 希望 的 是 为 自己 的 公 


司 带 来 更 多 生意 。 但 在 推动 销售 外 ， 谷 歌 和 脸谱 网 的 广告 还 为 巨大 的 数 
据 储 量 打开 了 一 局 窗 一 一 提供 网 络 上 实时 的 观点 和 意见 快照 。 谷 歌 的 

AdSense 产 品 和 脸谱 网 广告 都 所 供 了 对 广告 的 投放 用 户 衡 量 数据 。 因 为 
这 些 广 告 跟 选 定 的 谷歌 关键 词 相关 联 ， 也 可 以 与 脸谱 网 的 基本 信息 和 兴 
趣 爱 好 相关 联 ， 所 以 创建 这 些 广告 或 活动 的 人 可 以 获取 收 到 广告 的 人 们 
的 (匿名 〉 数据。 


假设 这 样 一 种 场景 : 你 创建 了 一 个 AdSense 的 活动 ， 其 关键 词 为 “ 尝 
感 " 和 “生病 ”。 然 后 随 独 时 间 的 推移 ， 你 可 以 看 到 关于 这 些 关 键 词 的 指 
标 是 如 何 变 化 的 ， 获 得 这 些 数据 的 途径 包括 搜索 或 得 看 Gmail 中 的 邮 
件 。 比 如 ， 当 秋冬 季节 流感 在 北半球 开始 暴发 的 时 候 ， 看 到 你 的 广告 的 
人 数 会 逐渐 上 升 。 通 过 查找 网 络 供应 商 数据 ， 你 可 以 绘制 流感 症状 在 一 
个 国家 内 的 传播 的 地 图 ， 找 到 热点 和 传播 模式 ， 甚 至 可 以 预测 下 次 暴发 
的 规模 、 地 点 或 者 其 他 动态 。 


这 种 方式 的 流感 追踪 已 丝 有 一 些 先 例 。 风 瑟 . 埃 森 巴 赫 在 2004~2005 
年 ， 于 加 拿 大 的 流感 季节 使 用 AdSense 追 踪 流 感 。 他 创建 了 一 个 当 人 们 
搜索 “流感 ”或 “流感 症状 ”的 时 候 会 出 现 的 广告 。 该 广告 的 内 容 是 : “你 
感冒 了 吗 ? 是 否 发 烧 、 胸 问 、 虚 弱 、 疼 痛 、 头 痛 、 咳 嗽 ? ”， 并 链接 至 
一 个 普通 的 医学 教育 网 站 。 他 发 现 这 个 方法 “ 比 起 传统 的 定点 医师 发 现 
类 似 流感 疾病 并 上 报 的 方法 更 加 及 时 准确 ， 且 便宜 得 多 一 一 整个 流感 季 
节 仅 花费 了 365.64 加 币 。” 


除了 可 以 奶 躁 一 个 国家 的 流感 传播 情况 (本 书 的 第 五 部 分 还 介绍 了 
全 球 疾病 奶 踪 器 ， 比 如 谷歌 流感 趋势 ) ,AdSense 的 方法 还 可 以 用 于 政治 
分 析 或 其 他 需要 民意 测验 的 领域 。2012 年 的 选举 中 ， 一 个 广告 在 “我 希 
望 奥巴马 说 ”作为 关键 词 被 输入 时 会 出 现 ， 男 一 个 广告 在 “我 希望 奥巴马 
输 ” 被 输入 时 会 出 现 ， 它 们 就 可 以 作为 采集 两 种 观点 的 渠道 。 


在 本 书写 作 时 ， 脸 谱 网 的 广告 系统 和 谷歌 还 有 所 不 同 ， 广 告 投放 者 
从 脸谱 网 获得 的 是 用 户 个 人 信息 的 一 些 特定 部 分 。 根 据 脸谱 网 广告 的 协 


议 条 球 ， 广 告 商 可 以 把 用 户 个 人 信息 中 的 特定 内 容 作 为 目标 ， 包 括 地 理 
位 置 ( 城 市 、 州 、 省 或 国家 )〉 、 基 本 信息 年龄 范围 、 性 别 、 语 言 、 婚 
姻 状 态 ) 、 爱 好 和 兴趣 、 受 教育 程度 以 及 职业 。 在 这 种 情况 下 ， 广 告 商 
并 不 能 获得 用 户 的 状态 更 新 或 评论 中 的 词汇 或 短语 。 男 外 ， 他 们 也 不 能 
获取 照片 的 相关 信息 ， 比 如 位 置信 息 、 活 动 内 容 等 。 (需要 注意 有的是， 
条 球 会 不 断 地 修改 。 脸 谱 网 的 移动 应 用 强调 了 图 片 的 分 至 功能 ， 表 明了 
脸谱 网 对 于 获取 移动 设备 拍摄 的 照片 有 很 大 兴趣 ， 这 些 照 片 附带 了 丰富 
的 元 数据 。) 


尽管 脸谱 网 对 广告 植 和 有 很 多 限制 ， 但 通过 它 ， 人 们 可 以 有 效 地 获 
取 不 同人 群 中 的 特定 观点 。 例 如 ， 在 2012 年 选举 期 间 ， 你 可 以 设 定 一 则 
广告 ， 让 它 显 示 在 标记 了 “喜欢 米 特 : 罗 姆 尼 ? 或 在 兴趣 中 提 到 他 的 名 字 
并 且 受 过 高 等 教育 的 用 户 的 页 面 上 。 


到 目前 为 止 ， 对 于 匿名 挖掘 在 线 广告 的 衡量 数据 以 获得 接近 实时 的 
调查 对 象 的 观点 这 种 想法 ， 学 术 界 尚未 有 广泛 的 探索 。 但 这 个 方法 被 证 
明 可 以 让 个 人 有 效 、 及 时 、 便 宜 地 获取 流行 观点 和 其 他 隐藏 在 谷歌 和 脸 
详 网 的 独占 数据 背后 的 要 素 。 


通过 推 文 识别 危机 


与 挖掘 脸谱 网 和 谷歌 的 数据 山 所 需 的 曲折 方法 不 同 ， 推 特 的 开放 生 
态 系 统 让 数据 挖掘 更 加 直接 : 及 集 推广 ， 过 滤 并 分 析 有 关 压 力 、 和 危机 或 
其 他 观点 的 指标 。2011 年 10 月 ， 联 合 国 秘书 长 办 公 厅 倡议 的 “全 球 脉 
动 * 项 目 ， 出 版 了 对 印度 尼 西 亚 和 美国 的 推广 进行 研究 的 结果 。 其 目标 
是 更 好 地 理解 公民 的 观点 ， 并 为 现 有 的 政策 研究 增加 筹码 。 


该 项 目 把 推 文 进行 分 类 ， 并 对 公民 关心 的 问题 进行 了 量化 分 析 。 研 
完 人 员 关 注 的 主要 衡量 指标 包括 关于 某 个 特定 话题 的 推 文 的 反常 增加 或 


减少 ， 比 如 停电 ， 推 竺 对 话 主题 每 周 或 每 月 的 变化 趋势 ， 东 个 特定 话题 
在 一 段 时 间 内 的 容量 特征 ， 不 同 子 话题 的 比例 ， 比 如 非 正 式 和 正式 借 
款 ; 以 及 推 符 聊天 的 方式 和 其 他 不 同 来 源 的 数据 比较 。 


“全 球 脉动 ”项 目的 合作 方 Crimson Hexagon， 是 一 家 采集 和 分 析 公 开 
社会 媒体 数据 的 公司 。 根 据 这 家 公司 的 分 析 ， 印 度 尼 西亚 是 推 特 公 司 的 
全 球 第 四 大 市 场 ， 其 国民 每 天 发 布 55 亿 条 带 有 位 置 标签 的 推 文 。 在 “全 
球 脉动 "项目 中 ，Crimson Hexagon 公 司 获 取 了 2010 年 7 月 到 2011 年 10 月 
所 有 公开 发 布 的 推 文 ， 通 过 使 用 哈佛 大 学 定量 社会 科学 研究 所 开发 的 观 
点 分 析 运 算法 则 ， 来 分 析 文 本 中 的 关键 词 以 及 这 些 词 之 间 的 关系 ， 研 究 
人 员 可 以 了 解 引起 话题 来 源 的 主题 类 型 和 相对 强度 ， 如 印度 尼 西 亚 这 上 段 
时 间 内 的 债务 、 食 物价 格 和 供应 量 以 及 燃料 等 问题 。 印 上 度 尼 西亚 的 一 些 
推 文 话题 被 用 来 与 美国 的 推 符 对 话 相 比较 ， 借 此 观察 两 者 差异 。 


其 中 的 一 个 发 现 表 明 两 个 国家 有 关 燃 料 的 推广 有 所 不 同 。 美 国 关于 
燃料 的 推 文 主要 关心 的 是 价格 ， 而 印度 尼 西 亚 的 推 文 关注 的 则 是 是 否 有 
不 同类 型 的 燃料 ， 比 如 汽油 、 柴 油 、 石 油 和 煤油 。 这 个 区 别 意 味 着 ， 进 
一 步 的 研究 需要 区 分 燃料 话题 的 相关 子 话题 。 为 外 ， 研 究 人 员 发 现 印 度 
尼 西 亚 关 于 粮食 价格 的 推 文 的 数量 与 通货 膨胀 统计 数据 密切 相关 。 


研究 人 员 得 出 的 结论 表明 ， 数 据 和 文本 分 析 不 能 作为 衡量 一 个 人 的 
长 期 目标 和 关心 的 问题 的 标准 。 但 他 们 发 现 ， 推 迁 数 据 作 为 烯 选 观点 的 
一 个 总 体 方法 非常 有 用 ， 特 别 是 用 于 研究 一 个 国家 公民 当前 所 关心 的 问 


jel 


挖掘 金融 的 未 来 


里 然 对 于 一 个 研究 人 员 或 企业 家 来 说 ， 最 具有 挑战 的 可 能 是 去 获取 
匿名 金融 数据 的 大 数据 库 ， 但 这 些 数 据 可 以 提供 关于 一 个 国家 的 经 济 状 


况 信 息 ， 甚 至 还 可 以 预测 未 来 的 经 济 危 机 。 当 然 ， 大 银行 拥有 并 使 用 这 
些 数 据 来 判断 客户 的 周转 率 ， 决 定 哪些 人 可 以 贫 球 、 哪 些 人 具有 民 好 信 
用 以 及 使 用 什么 样 的 利率 。 


但 如 条 这 类 数据 可 以 更 广泛 地 供 大 银行 以 外 的 研究 人 员 或 企业 使 
用 ， 对 于 所 有 规模 的 行为 经 济 部 将 是 有 利 的 。 肤 省 理工 学 院 的 弛 局 琳 
克 管 姆 (第 七 章 也 讨论 过 ) 的 工作 可 以 让 我 们 了 解 一 些 这 种 可 能 性 。 
2008 年 ， 死 鲁 姆 获得 权限 接 入 美国 银行 的 一 个 匿名 数据 库 ， 其 中 含有 8 
000 万 客户 的 金融 数据 。 她 的 分 析 主 要 是 关于 这 些 客户 的 购买 模式 。 死 
鲁 姆 及 现 ， 经 第 把 钱 花 在 杂货 店 和 和 餐馆 的 人 们 的 行为 最 容易 预测 ， 而 那 
些 把 钱 花 在 加 油 站 和 快餐 连锁 店 的 人 不 易 预 测 。 她 还 发 现在 一 次 购物 出 
行 中 ， 富 有 的 人 倾 癌 于 在 不 同 的 商店 消费 ， 而 那些 不 那么 富有 的 人 ， 在 
一 次 购买 行为 中 基本 上 只 去 一 家 商店 。 


这 类 分 析 只 是 冰山 一 角 。 当 银行 数据 和 其 他 类 型 的 数据 结合 起 来 ， 
比如 地 理 数 据 和 人 口 普 碍 数据 ， 人 们 可 以 在 一 个 空前 规模 上 对 国家 的 经 
谤 版 图 进行 描绘 。 比 如 ， 人 们 可 以 预测 工作 岗位 的 增长 和 下 降 ， 或 者 将 
消费 模式 与 消费 信心 指数 连接 在 一 起 。 后 者 可 以 提供 最 新 的 即时 消费 信 
心 指数 。 这 些 数据 可 以 用 于 预测 哪些 产业 会 受到 经 济 隧 退 的 有 影响， 还 可 
能 预测 它们 受 影响 的 程度 。 大 数据 驱动 的 指标 可 以 帮助 企业 和 政府 做 出 
可 能 缓和 将 发 生 的 经 济 危 机 的 决定 。 


个 人 金融 初创 企业 Mint 创 办 于 2006 年 ， 已 拥有 数 百 万 的 最 新 金融 交 
易 信息 。 该 公司 为 用 户 提 供 简 单 易 用 的 界面 ， 让 用 户 可 以 通过 手机 应 用 
程序 或 电脑 网 页 浏览 目 己 所 有 的 金融 账 尸 信息。 除了 回 用 户 提供 他 们 的 
基本 金融 信息 ，Mint 还 提供 理财 建议 ， 比 如 说 ， 根 据 用 户 需 求 推 荐 信用 
卡 或 储蓄 账户 。2009 年 ， 曾 开 及 了 广 受 欢迎 的 个 人 金融 软件 Quicken 的 
Intuit 公 司 收购 Mint 的 时 候 ， 也 同时 购买 了 所 有 Mint 的 客户 数据 。 


现在 ，Mint 的 主要 业务 是 问 客 户 提供 他 们 的 消费 和 储 荔 信息 ， 并 推 
断 他 们 未 来 的 习惯 以 便 问 客户 推荐 信用 卡 、 健 康 保险 、 旅 行 等 的 最 佳 促 


销 活动 。2010 年 ，Mint 公 司 启用 了 一 个 可 视 化 工具 一 一 MintData， 它 可 
以 让 人 们 查看 所 有 Mint 用 户 的 匿名 总 消费 信息 。 例 如 ， 人 们 可 以 看 到 大 
家 在 俄 克拉 何 马 州 的 餐馆 与 在 华盛顿 的 餐馆 平均 消费 水 平 的 比较 。 
MintData 项 目 已 经 被 终止 了 ， 但 在 2013 年 本 书写 作 期 间 ，Mint 公 司 已 经 
计划 开发 一 个 相似 的 可 视 化 工具 。 


如 果 Mint 的 百 万 客户 的 匿名 金融 数据 都 公开 的 话 ， 那 么 除了 一 部 分 
Intuit 公 司 的 研究 人 员 和 与 该 公司 合作 的 经 济 学 家 之 外 ， 会 有 更 多 的 人 可 
以 对 这 些 数据 进行 研究 。 友 现金 融 数 据 中 的 趋势 ， 可 以 帮助 预测 经 济 危 
机 ， 也 可 以 帮助 建立 基于 数据 的 改善 经 济 指南 。 将 金融 数据 和 其 他 数据 
集 配 对 起 来 ， 甚 至 可 以 通过 回答 一 些 简 单 问题 ， 比 如 在 哪个 区 域 消 费 者 
购买 了 更 多 的 橙汁 以 预防 感冒 ， 来 预测 流感 的 传染 。 昌 然 这 些 都 还 是 金 
融 数 据 分 析 的 初步 应 用 ， 但 拥有 获取 这 种 类 型 的 数据 对 人 们 来 说 已 经 很 
令 人 激动 了 。 


国家 层面 的 数据 有 很 多 种 使 用 方式 ， 其 中 的 一 些 对 政 集 具有 很 重要 
的 意义 。 数 据 可 视 化 提供 了 一 种 令 人 信服 的 直观 方式 来 讲述 数据 背后 的 
故事 。 当 通过 这 些 可 视 化 的 图 表 、 动 画 或 是 互动 数据 工具 可 以 很 容易 地 
发 现 数据 的 变化 趋势 时 ， 政 策 制定 者 们 就 不 容易 忽视 可 能 发 生 的 危机 。 
数据 可 视 化 或 其 他 信息 分 析 工 具 总 是 希望 能 获得 最 新 的 数据 ， 而 这 正 是 
CDRs 数 据 可 以 发 挥 作用 之 处 。 除 了 提供 高 密度 的 大 众 移动 信息 ，CDRs 
数据 还 可 以 提供 几乎 实时 的 信息 ， 从 而 帮助 相关 人 员 尽 可 能 快速 和 有 效 
地 处 理 目 然 灾害 等 危机 。 


为 了 获得 对 国家 层面 的 感知 ， 你 可 以 从 我 们 这 个 时 代 的 网 络 巨 头 公 
司 获得 该 层面 的 数据 。 你 可 以 通过 接 入 谷歌 和 脸谱 网 的 广告 服务 网 络 ， 
发 布 广告 并 分 析 挖 据 其 结果 指标 数据 。 推 竺 具有 大 量 的 公共 可 获得 数 
据 ， 同 样 也 可 提供 丰富 的 大 众 观 点 。 通 过 语句 文本 解析 算法 ， 可 以 从 推 
特 每 天 亿 万 条 140 个 字符 以 内 的 海量 内 容 中 抽取 多 样 化 的 信息 。 然 而 ， 
所 有 这 些 方式 都 是 为 了 确保 你 提出 了 正确 的 问题 并 验证 你 的 发 现 。 第 九 


章 将 涉及 一 种 重要 的 双 校 验 机 制 : 将 个 体重 新 放 回 更 大 范围 的 全 球 链 
中 


1. 列 维 飞 行 ， 根 据 法 国 数学 家 保罗 : 列 维 命名 ， 是 一 种 随机 游 走 模 型 。 一 一 译 者 注 


很 多 趋势 可 以 通过 对 搜索 词 的 流行 程度 、 频 率 和 周期 性 等 进行 调 
碍 来 获得 。 谷 歌 提 供 了 一 个 名 为 “谷歌 公共 数据 管理 器 ”的 工具 ， 使 用 
世界 银行 以 及 其 他 数据 集 ， 让 人 们 对 一 段 时 间 内 不 同 的 统计 数据 进行 
比较 。Data.gov 网 站 链接 了 很 多 美国 政府 和 非 政府 组 织 的 可 视 化 数 
据 ， 并 常 将 这 些 数 据 在 地 图 上 进行 登 加 。 
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第 九 章 
大 数据 能 为 世界 市 来 什么 ? 


现实 挖掘 影响 深远 的 应 用 之 一 是 预测 疾病 和 人 奶 踩 传染 病 。 在 当今 的 
全 球 化 世界 ， 致 命 疾病 会 灾难 性 的 传播 至 空前 多 的 人 口 。 本 书 的 最 后 这 
个 部 分 介绍 了 全 球 层面 的 数据 ， 并 着 眼 于 更 好 地 了 人 解 疾病 是 如 何在 我 们 
这 个 大 规模 连接 的 世界 中 传播 的 。 由 于 数据 集 可 以 告诉 我 们 人 们 是 如 何 
迁移 、 他 们 在 网 络 上 搜索 什么 以 及 他 们 的 感受 ， 因 此 我 们 有 机 会 创造 了 
-个 基于 信息 的 概念 来 说 明 世 界 是 如 何 运转 的 。 


正如 世界 各 国共 同 参 与 协调 人 口 研究 一 样 ， 世 界 银行 、 联 合 国 以 及 
其 他 国际 机 构 已 经 局 动 并 持续 采集 跨国 数据 。“ 干 年 友 展 目标 ”提出 了 一 
系列 到 2015 年 应 实现 的 8 个 目标 ， 包 括 使 极 闪 贫 穷 和 饥饿 人 口 减 半 、 控 
制 艾滋 病毒 /艾滋 病 的 传播 等 。 在 这 些 目 标的 激励 下 ， 这 些 国际 组 织 建 


立 了 国家 内 以 及 国家 间 的 标准 化 协调 采集 数据 计划 和 指导 方针 ， 并 局 动 
了 国际 数据 采集 行动 。 


当然 ， 正 如 在 第 四 部 分 中 讨论 的 天 于 国家 数据 普查 一 样 ， 全 球 数据 
普查 也 是 静态 的 。 因 此 ， 在 对 疾病 扩散 进行 建 模 时 ， 一 个 重要 的 步骤 是 
量化 人 口 的 迁移 ， 同 时 ， 我 们 还 必须 关注 网 络 数据 集 ， 比 如 航空 旅行 和 
远洋 航线 。 每 年 有 上 亿 乘 客 乘坐 飞机 ， 每 个 乘客 都 有 可 能 把 疾病 带 到 新 
的 人 群 中 ， 而 且 尽 管 海运 并 不 会 有 航空 乘客 那么 多 ， 但 海运 的 食品 和 货 
物 在 不 知 不 觉 中 也 可 能 含有 入 侵 物 种 ， 比 如 有 问题 的 病毒 、 细 戎 或 寄生 
虫 。 


在 全 球 层 面 上 ， 最 有 吸引 力 的 数据 来 源 是 互联 网 搜索 查询 ， 它 为 研 
完 人 类 行为 和 环境 情况 提供 了 一 局 窗户 。 合 歌 的 匿名 搜索 词 数据 库 是 该 
层面 最 强大 的 数据 来 源 之 一 (一 个 复 森 的 事实 和 需要 关注 的 问题 是 政府 
古人 否 会 非法 获取 这 些 数据 ) ， 该 数据 库 在 用 户 没有 登录 目 己 的 谷歌 账户 
的 状态 下 不 会 识别 特定 的 个 人 ， 而 是 通过 互联 网 供应 商 的 地 址 来 识别 该 
用 户 。 谷 歌 目 己 在 一 些 有 用 的 工具 中 使 用 并 公布 了 部 分 数据 ， 比 如 谷歌 
流感 退 踪 系统 和 谷歌 搜索 解析 。 这 些 工 具 表 明 ， 任 何人 都 可 以 将 一 段 时 
间 内 的 搜索 词 的 受 欢迎 程度 可 视 化 ， 并 下 载 有 用 的 数据 以 便 进一步 研 


Bx 


九 。 


推荐 也 可 以 用 于 全 球 层面 。 本 章 中 我 们 讨论 了 一 些 接 入 推 特 的 fire 
hose 数 据 接口 的 不 同方 法 ， 该 数据 接口 每 天 产生 成 干 上 万 的 推 文 。 


但 是 ， 通 过 这 些 全 球 数据 ， 有 可 能 会 导致 草率 判断 现实 状况 。 在 大 
规模 数据 上 建立 的 模型 分 析 ， 应 该 尽 可 能 经 常 通过 个 体 经 验 来 证 实 ， 为 
自 上 而 下 的 判断 提供 自 下 而 上 的 经 验 检 验 。 为 此 ， 国 际 化 的 初创 企业 
Jana 开 发 了 一 个 手机 装置 来 采集 广泛 观点 。 该 公司 在 全 球 超 过 100 个 国 
家 中 ， 为 手机 用 户 提 供 赚 取 少量 通话 时 间 的 机 会 。 一 种 常用 的 方法 是 让 
人 们 通过 完成 手机 问卷 来 赚 取 通话 时 间 ， 这 种 问卷 可 以 包括 非常 广泛 的 
话题 ， 简 单 的 问题 比如 茶 种 特定 的 产品 在 当地 商店 中 是 否 有 售 ? 答题 者 


最 近 是 否 有 类 似 流 感 的 症状 ? 这 类 目 陈 式 调查 数据 提供 了 一 个 重要 的 、 
非 侵略 性 的 方法 ， 可 以 用 来 验证 由 人 口 层面 数据 而 产生 的 推断 分 析 。 


本 章 人 简单 介 绍 了 全 球 层面 数据 采集 的 不 同方 法 ， 并 者 眼 于 大 数据 最 
吸引 人 的 应 用 之 一 : 追踪 、 预 测 乃 至 消除 流行 疾病 。 


全 球 人 口 普 奉 


像 世界 银行 、 联 合 国 统计 委员 会 、 经 济 合 作 与 发 展 组 织 以 及 国际 货 
币 基 金 组 织 这 样 的 国际 组 织 已 经 积极 地 确保 所 采集 的 关于 参与 国 的 数据 
达到 一 定 的 标准 。 据 此 ， 它 们 共同 合作 为 统计 工作 开发 合适 的 框架 以 及 
最 佳 实践 政策 ， 并 在 追踪 记录 数据 交换 过 程 和 方法 的 指标 上 达成 了 共 
识 。 世 界 银行 在 这 些 最 佳 实践 的 约束 下 ， 根 据 来 自 不 同 国家 统计 系统 的 
数据 来 汇编 国际 数据 集 。 另 外 ， 它 还 资助 在 全 球 采 集 数 据 的 项 目 ， 比 如 
MAPS 计 划 《〈 马 拉 喀 什 数据 统计 行动 计划 ) 以 及 PARIS21 联 盟 〈21 世 纪 
发 展 统计 伙伴 联盟 ) 。 


MAPS 计 划 共 包括 6 个 行动 ， 旨 在 改善 国际 和 国家 统计 系统 。 在 “ 干 
年 发 展 目标 ”的 驱动 下 ，MAPS 计 划 包 括 三 个 专门 关注 全 球 层 面 数据 采集 
的 行动 : 一 是 为 所 有 低 收 入 国家 规划 统计 系统 并 规划 国家 统计 发 展 战 
略 ， 直 到 2006 年 ; 二 是 保证 所 有 发 展 中 国家 参与 2010 年 的 人 口 普查 ; 三 
是 设立 国际 家 庭 调查 网 络 ， 用 于 采集 以 家 庭 为 单位 的 全 球 社会 经 济 数 
据 。 


PARIS21 联 盟 则 是 一 个 决策 者 和 分 析 师 之 间 的 国际 合作 。 该 论坛 成 
立 于 1999 年 ， 促 进 、 影 响 并 帮助 了 很 多 国家 通过 最 有 效 和 最 有 用 的 方法 
使 用 统计 数据 。 它 帮助 “ 低 收 入 和 中 低 收 入 国家 设计 、 执 行 并 监管 国家 
层面 的 统计 发 展 战略 ”一 一 其 本 质 上 就 是 建立 统一 数据 采集 标准 的 一 种 
方法 , “并 让 国家 拥有 和 生产 所 有 千年 发 展 目标 所 要 求 的 指标 数据 ”。 


得 蔡 于 世界 范围 内 不 同 组 织 的 协同 努力 ， 跨 国 数据 和 全 球 人 口 普 奔 
数据 在 符合 合理 预期 标准 和 连贯 性 的 情况 下 ， 现 在 已 经 可 以 被 获 取 。 特 
别 是 那些 可 以 通过 世界 银行 、 经 济 合作 与 发 展 组 织 以 及 国际 货币 基金 组 
织 的 网 站 在 线 获 取 的 数据 ， 可 以 让 人 对 全 球 整体 经 济 状况 有 个 准确 而 快 
速 地 了 解 。 


航运 和 航海 的 足迹 


也 许 没 有 比 国内 和 国际 航空 航线 ， 更 能 够 在 全 球 层 面 上 代表 人 类 流 
动 的 途径 了 。2011 年 的 美国 ， 共 有 7.3 亿 乘客 乘坐 商用 飞机 出 行 。 同 
年 ， 全 球 飞 机 共 运 输 了 28 亿 乘客 。 人 们 从 A 地 点 到 B 地 点 的 路 线 选择 可 
以 和 人 口 普 碍 数据 、 疾 病 地 图 以 及 其 他 数据 集 交 叉 验 证 ， 用 于 了 解 信 
恩 、 交 易 和 疾病 的 传播 。 


这 些 流动 路 径 数 据 的 一 个 主要 来 源 是 国际 航空 运输 协会 ， 它 们 运营 
的 数据 库 采 集 了 2000 年 以 来 的 国内 和 国际 航线 的 信息 。 该 数据 库 的 信息 
来 自 130 多 家 航空 公司 ， 可 以 履 盖 全 球 每 月 约 90% 的 飞行 计划 。 这 些 数 
据 可 以 在 国际 航空 运输 协会 的 网 站 上 下 载 ， 订 阅 12 个 月 的 数据 大 约 要 花 
费 1 000 美 元 。 在 2006 年 ， 美 国 国家 科学 院 院 刊 的 一 篇 论文 中 ， 维 多 利 
亚 . 科 利 扎 和 她 的 同事 们 使 用 了 国际 航空 运输 协会 数据 库 中 2002 年 的 数 
据 ， 包 括 由 直达 航班 连接 的 成 对 机 场 以 及 任意 指定 航线 的 剩余 座位 。 他 
们 的 研究 成 果 形 成 了 一 个 包含 3 880 个 端点 〈 机 场 ) 以 及 18 810 条 连 线 
(在 机 场 之 间 流 动 的 乘客 〉 的 网 络 ， 研 究 人 员 利 用 这 个 网 络 建 立 了 全 球 
疾病 传播 模型 。 


另 一 个 航空 乘客 数据 的 来 源 是 UBM Aviation 公 司 ， 它 们 出 售 有 关 全 
球 航 空 业 的 数据 、 分 析 和 咨询 服务 。 截 至 2012 年 7 月 UBM Aviation 的 
数据 公司 OAG 的 数据 库 包括 超过 900 条 的 航线 以 及 超过 4 000 个 的 机 场 ， 
该 公司 同时 提供 1979 年 以 来 的 历史 航班 信息 时 间 表 。OAG 记 录 的 航线 报 


告 内 容 包 括 某 次 航班 共有 多 少 个 座位 ， 以 及 该 航班 的 出 发 城市 和 目标 城 
市 。 很 多 研究 人 员 曾 经 使 用 OAG 数 据 库 来 预 估 疾 病 传播 。 这 些 数据 库 可 
以 在 OAG 的 网 站 上 购买 ， 价 格 由 不 同 的 国家 、 数 据 类 型 以 及 订阅 模式 决 
定 ， 比 如 在 美国 ，“OAG 全 球 飞行 指南 ”一 年 的 订阅 价格 为 845 美 元 。 


除了 航空 以 外 ， 货 船 也 提供 了 一 些 研究 人 类 移动 性 的 切入 点 。 虽 然 
海运 运输 的 主要 是 货物 而 非 乘 客 〈 货 物 运输 占据 世界 交易 的 90%) ， 但 
航运 网 络 仍然 在 物种 入 侵 和 疾病 传播 中 扮演 着 重要 的 角色 。 


2001 年 ， 船 射 和 港口 开始 使 用 自动 识别 系统 〈 简 称 AIS) 设备 ， 从 
而 自动 将 海上 交通 的 来 往 航 线 电子 化 。 尽 管 自动 识别 系统 主要 用 于 防止 
碰撞 和 提高 港口 的 安全 性 ， 该 系统 的 附带 用 途 是 可 以 用 来 建立 一 个 庞大 
的 航运 网 络 数据 库 。 海 洋 网 络 数据 库 是 一 个 关于 航海 统计 的 在 线 记 录 ， 
其 内 容 包 括 船 舶 的 到 达 和 出 发 数据 ， 订 阅 价格 在 630~1 ”4000 美 元 不 等 
(取决 于 度量 标准 以 及 用 户 人 数 ) 。 书 勃 罗 . 卡 鲁 扎 以 及 他 的 同事 通过 
这 个 数据 库 获 得 了 2007 年 的 历史 自动 识别 系统 数据 ， 并 借 此 追踪 了 超过 
16 ”000 艘 船舶 以 及 近 千 个 港口 ， 连 接 了 超过 36 ”351 对 有 直接 航线 的 港 
口 。 基 于 2007 年 主要 货船 的 行程 ， 研 究 人 员 发 现 了 在 干 散 货运 输 、 集 装 
货运 以 及 油 饶 运输 之 间 出 现 的 三 种 截然 不 同 的 运输 模式 。 比 如 ， 集 装 


谷歌 “趋势 


根据 采集 了 谷歌 官方 历史 数据 和 Comscore 数 据 的 Statistic Brain 公司 
提供 的 信息 ， 搜 索 巨 头 谷 歌 平 均 每 天 收 到 47 亿 次 网 页 得 询 ， 仅 2011 年 一 
年 就 有 1.7 万 亿 次 搜索 。 这 些 搜索 是 了 解 人 们 的 兴趣 以 及 所 处 状况 的 线 
索 。 该 公司 甚至 将 流感 暴发 和 搜索 词 频 率 联 系 起 来 (第 十 章 中 会 进一步 
解释 ) 。 同 样 的 ， 很 多 其 他 趋势 可 以 通过 对 搜索 词 的 流行 程度 、 频 率 和 


周期 性 等 进行 调查 来 获得 。 


谷歌 提供 了 一 个 名 为 “趋势 ”的 免费 公共 工具 ， 让 任何 搜索 网 页 搜索 
的 人 都 可 以 看 到 搜索 随时 间 的 变化 。 该 工具 使 用 来 自 上 亿 匿 名 用 户 的 搜 
索 查 询 数 据 ， 而 且 只 要 用 户 登 录 目 己 的 谷歌 账户 ， 就 可 以 下 载 。 


社交 网 络 的 全 球 数据 


针对 全 球 层面 在 线 数 据 的 讨论 是 无 法 避 开 推 竺 和 脸谱 网 的 。 正 如 在 
第 七 昔 和 第 八 章 中 提 到 的 ， 推 竺 拥有 一 个 名 为 fire hose 的 数据 接口 ， 让 
研究 人 员 和 企业 可 以 获取 绝 大 多 数 的 推 文 。 已 经 有 大 量 的 书 讨论 如 何 让 
推 适 数 据 有 意义 。 本 书 中 ， 我 们 提供 了 一 些 在 进行 定制 分 析 时 很 有 用 的 
数据 来 源 选 项 。 


2012 年 中 期 ， 推 特 宣称 其 全 球 超过 1.4 亿 用 户 每 天 发 布 的 推 文 超过 

了 4 亿 条 。2012 年 8 月 ， 推 特 发 布 了 他 们 的 认证 合作 项 目 ， 特 别提 到 了 

DataSift、Gnip、Topsy 等 12 个 合作 伙伴 公司 。 每 个 公司 都 有 不 同 的 目标 
和 方法 ， 但 都 可 以 深入 获取 推 特 数据 以 及 关于 数据 的 深入 了 解 。 这 些 公 
司 反 过 来 用 不 同 的 方法 分 析 数 据 ， 然 后 将 预 分 类 过 的 数据 集 和 服务 提供 
给 其 他 公司 或 个 人 ， 这 些 公 司 或 个 人 往往 对 通过 推 特 表达 的 不 同 观点 有 
兴趣 。 如 果 想 要 找到 关于 2012 年 总 统 选 举 的 推 文 和 对 话 ，DataSift 公 司 

可 以 使 用 自然 语言 处 理 以 及 其 他 过 滤 条 件 来 采集 和 整理 这 些 推 文 ， 并 提 
供 每 月 3 000~15 000 美 元 价格 不 等 的 产品 ， 这 取决 于 收 到 数据 的 单位 和 
所 提供 的 服务 。 


对 于 那些 选择 自行 接 入 推 特 的 人 来 说 ， 可 以 通过 推 特 上 自己 的 应 用 程 
序 编程 接口 来 进行 现实 挖掘 。 而 据 推 关公 司 的 说 法 ， 这 些 应 用 程序 编程 
接口 也 在 不 断 地 更 新 。 一 个 可 用 的 应 用 程序 编程 接口 是 用 来 查询 推 等 内 
容 的 ， 比 如 关键 词 、 涉 及 特定 用 户 的 推 文 或 是 来 自 茶 个 特定 用 户 的 推 


文 。 不过， 这 个 应 用 程序 编程 接口 有 局 限 性 。 它 不 是 一 个 推 文 的 完整 索 
Gl: 它 不 能 搜索 一 个 星期 以 前 的 推 文 ， 而 且 搜 索 词 在 复杂 性 上 受 限 。 推 
特 的 流 式 应 用 程序 编程 接口 比 搜索 应 用 程序 编程 接口 好 用 ， 比 如 ， 人 允许 
追踪 更 多 的 关键 词 ， 搜 集 带 有 特定 区 域 地 理 标记 的 推广 。 所 有 推 文 在 一 
定 的 比例 限制 下 的 随机 抽样 片段 ， 就 是 通过 这 个 应 用 程序 编程 接口 抽取 
出 来 的 。 


正如 第 七 章 中 提 到 的 ， 获 取 脸 谱 网 数据 的 途径 之 一 是 广告 分 机， 但 
还 有 为 一 种 方法 是 通过 该 公司 为 开 及 人 员 设 计 的 开放 图 表 工 具 。2010 
年 ， 该 公司 提供 开放 图 谱 协 议 ， 同 大 众 提供 了 用 户 社 交 图 谱 中 公开 的 部 
分 ， 包括 好 友 、 照 片 、 活 动 和 页 面 。 社 交 图 谱 中 的 每 个 对 象 都 有 了 唯一 的 
ID， 并 且 可 以 通过 图 谐 应 用 程序 编程 接口 调用 IDD。 图 谱 应 用 程序 编程 接 
口 的 标准 版 本 只 允许 用 户 在 每 次 查询 时 检索 一 条 信息 ， 批 处 理工 具 让 用 
户 一 次 可 以 发 起 多 达 50 次 的 查询 。 社 区 网 络 上 的 流行 应 用 程序 的 开发 
者 ， 在 用 户 授权 该 应 用 获取 数据 的 情况 下 ， 可 以 通过 连续 的 批 处 理 快 速 
地 检索 数 百 万 脸谱 网 用 户 数 据 。 


脸 详 网 和 推 特 痢 是 正在 发 展 中 的 公司 ， 它 们 都 在 改变 获取 一 定数 量 
或 类 型 数据 的 方法 。 关 于 全 球 层面 上 人 们 的 思考 、 移 动 以 及 行为 ， 这 两 
家 公司 都 癌 研 究 人 员 提 供 并 且 将 持续 提供 新 观点 ， 因 此 它们 也 是 现实 控 
据 所 需 数据 的 重要 来 源 。 


现实 挖掘 的 实际 核查 


通过 大 量 数据 对 世界 进行 目 上 而 下 的 、 上 禹 视角 的 观察 ， 可 以 使 人 
们 获得 前 所 未 有 的 了 解 世 界 各 个 角落 出 现 的 趋势 的 途径 。 但 如 果 从 全 世 
界 干 万 亿 字 节 级 别 的 数据 中 得 出 的 结论 没有 复核 机 制 ， 那 么 从 这 些 数据 
中 建立 的 模型 可 能 没 法 像 人 们 和 希望 的 那么 有 价值 。 手 机 除了 在 这 个 层面 
上 通过 CDRs 数 据 提 供 对 于 人 们 的 移动 性 的 观 友 〈 见 第 四 部 分 ) ， 还 可 


以 作为 个 人 状况 和 环境 的 有 效 核 碍 工具 。 


天 于 这 些 现实 核 得 的 重要 性 的 一 个 早期 案例 ， 是 关于 卢旺达 的 霍乱 
暴发 的 研究 。2009 年 ， 内 森 : 伊 格 尔 在 户 旺 达 与 公共 健康 社区 以 及 当地 
电信 公司 合作 ， 试 图 证 明 从 CDRs 数 据 中 得 到 的 人 们 的 活动 情况 能 够 预 
汕 疾 病 的 骏 发 。 研 究 人 员 相 信 ， 如 采 疾 病 将 要 暴发 ， 一 个 主要 的 表现 是 
在 被 感染 的 社区 中 的 人 口 活动 会 减少 。 他 们 怀疑 人 人 口 活动 的 减少 是 由 类 
似 流感 的 症状 导致 的 ， 而 且 似乎 是 预示 一 周 后 霍乱 暴发 的 最 初 信号 。 


然而 ， 这 些 社区 中 活动 的 减少 被 证 明 并 不 是 因为 人 们 受到 类 似 流 感 
证 状 的 困扰 ， 而 是 由 于 暴雨 冲 毁 了 道路 。 模 型 发 现 活动 减少 是 因为 洪水 
而 不 是 因为 霍乱 。 尽 管 洪水 是 霍乱 暴发 的 先兆 ， 但 活动 的 减少 极 证 明 与 
流感 症状 的 困扰 无 关 。 但 仅 从 全 球 的 视角 来 看 ， 人 口 流动 性 低 与 疾病 之 
闻 的 关联 度 比 起 与 基础 设施 问题 之 间 的 联系 要 更 为 突出 。 


得 益 于 伊 格 尔 和 全 球 移动 运营 商 之 间 的 民 好 关系 ， 他 在 2009 年 成 并 
了 Jana 公 司 《〈 前 映 为 txteagle) ， 访 公司 让 国际 品牌 可 以 方便 地 通过 手机 
与 人 们 打交道 。 到 2013 年 中 期 ，Jana 公 司 在 全 球 已 有 35 亿 订阅 用 户 。 
Jana 的 主要 目标 之 一 是 采集 消费 者 对 于 新 兴 市 场 的 观点 ， 在 这 个 领域 传 
统 的 市 场 调研 往往 不 够 有 用 或 高 效 。Jana 公 司 提供 激励 措施 以 吸引 人 们 
加 入 研究 小 组 ， 提 供 他 们 的 观点 和 意见 的 用 户 可 以 换取 额外 的 通话 时 
间 。 该 公司 正在 建立 一 个 自助 界面 ， 让 研究 人 员 可 以 同 超过 100 个 国家 
的 手机 订阅 者 发 送 定制 的 调查 问卷 。 通 过 这 种 方式 ，Jana 提 供 了 一 种 直 
接 从 35 亿 手机 订阅 者 的 样本 中 获取 观点 的 方法 ， 为 全 球 的 大 数据 分 析 现 
实 核查 提供 了 入 口 。 


有 史 以 来 ， 人 类 第 一 次 拥有 在 全 球 层面 看 到 自身 行为 的 能 力 。 不 同 
的 人 口 普查 、 出 行 和 航行 网 络 、 基 于 网 页 的 搜索 、 社 交 网 络 行为 ， 以 及 
手机 的 使 用 正在 这 种 能 力 中 扮演 着 重要 的 角色 。 出 现 这 些 变 化 和 发 展 ， 
部 分 原因 是 人 与 人 之 间 的 现实 连接 和 数字 连接 都 大 大 地 增多 了 ， 这 也 
导致 了 疾病 传播 的 速度 变 快 和 范围 变 大 。 下 一 章 将 会 深入 探讨 天 于 流行 


病 退 踪 、 建 模 和 预测 领域 中 的 一 些 可 能 的 应 用 。 


第 十 章 
明天 会 更 好 


当今 世界 被 数据 履 盖 ， 从 飞行 网 络 到 通话 数据 记录 以 及 网 络 搜索 和 
脸谱 网 状态 更 新 。 在 全 球 层面 建立 一 个 系统 的 方法 来 改善 全 球 健康 状况 
也 许 是 大 数据 最 有 价值 的 一 个 应 用 。 作 为 本 书 的 最 后 一 章 ， 本 章 专 门 探 
讨 使 用 全 球 数据 来 识别 以 及 阻止 传染 病 传播 的 方法 ， 这 些 传染 性 疾病 包 
括 流 行 性 感冒 、 闪 疾 等 。 通 过 前 述 章节 中 提 到 的 数据 ， 我 们 来 看 一 下 可 
以 用 它们 建立 特定 疾病 在 全 球 传播 模型 的 各 种 方法 。 


疾病 通过 人 、 昆 虫 以 及 其 他 载体 传播 。 为 了 了 解 疾病 是 如 何 传播 
的 ， 将 载体 的 移动 状况 进行 定量 很 重要 。 一 种 采集 移动 状态 信息 的 方法 
是 使 用 航空 和 海运 路 线 上 的 数据 。 在 上 一 半 中 已 经 介绍 过 ， 这 种 粗略 地 
衡量 移动 性 的 方法 ， 被 证 实 古 改善 疾病 传播 现 有 模型 的 一 个 重要 方法 。 
本 章 关 注 能 够 使 豚 空 和 航海 数据 更 精确 的 方法 ， 以 便 得 出 关于 一 些 特定 
全 球 疾病 载体 的 更 精确 的 观点 ， 比 如 严重 的 急性 呼吸 综合 征 。 


模型 不 仅仅 可 以 通过 加 入 飞机 和 船舶 的 移动 来 进一步 改善 ， 还 可 以 
加 入 个 人 选择 的 不 同 路 径 。 全 球 有 超过 65 亿 活跃 手机 订阅 ，CDRs 数 据 
可 以 为 传统 流行 病 学 家 的 模型 带 来 巨大 的 价值 增值 。 另 外 ， 当 CDRs 数 
据 与 用 户 当 前 健康 状况 手机 实时 调研 数据 结合 起 来 ， 手 机 可 以 成 为 一 个 
强大 的 流行 病 预警 系统 。 


一 般 移动 性 和 区 流行 为 是 一 个 人 的 思想 和 健康 状况 的 很 好 的 指标 ， 
但 搜索 词 可 以 提供 额外 的 信息 : 它们 表明 了 茶 人 关于 东 个 话题 的 明确 兴 
趣 。 正 如 上 一 章 中 讨论 的 ， 谷 歌 全 球 搜 索 词 的 资料 库 可 以 提供 一 段 时 间 
内 搜索 词 之 间 的 定性 比较 ， 正 如 类 似 谷歌 趋势 之 类 的 工具 所 展示 的 。 正 


是 有 特定 的 应 用 目标 ， 比 如 监控 人 们 对 流感 的 关注 度 ， 搜 索 词 才 可 以 成 
为 公共 健康 领域 独特 而 强大 的 数据 库 。 谷 歌 流感 退 踪 系统 是 一 个 使 用 现 
有 大 数据 的 优秀 例子 ， 它 可 以 智能 分 析 搜 索 词 并 将 其 与 现 有 的 流感 趋势 
数据 库 配 对 ， 让 任何 人 都 可 以 近乎 实时 地 看 到 流感 传播 状况 。 谷 歌 的 研 
守 人 员 利 用 这 一 概念 并 将 其 扩展 应 用 到 登革热 上 ， 说 明了 它 在 人 退 踪 季节 
性 流感 以 外 应 用 的 可 能 性 。 


和 谷歌 类 似 ， 脸 谱 网 和 推 笑 拥有 关于 人 们 的 意图 、 想 法 和 当前 状态 
的 海量 数据 。 近 年 来 ， 特 别 是 推 基 ， 已 经 成 为 公共 健康 研究 人 员 的 目标 
之 一 。 研 究 人 员 挖 所 在 推 文中 表达 的 健康 观点 ， 并 开发 自然 语言 处 理 运 
算法 则 来 消除 推 文 之 间 的 卜 义 〈 比 如， 描述 个 人 的 症状 与 天 于 茶 种 流行 
病 更 广泛 传播 的 新 闻 ) 。 这 个 研究 的 早期 阶段 主要 关注 流感 追踪 ， 因 为 
之 前 就 有 的 数据 库 可 以 用 于 验证 和 它们。 但 一 些 研究 人 员 扩 展 了 研究 范 
图， 开始 检索 更 加 综合 的 个 人 健康 状况 摘 述 ， 比 如 过 敏 、 肥 胖 以 及 其 他 
病痛 等 。 


本 章 强 调 了 全 球 数据 对 于 公共 健康 可 能 的 影响 ， 我 们 希望 可 以 在 流 
行 病 肆 虞 之 前 识别 并 且 能 消除 它们 。 


航空 线路 数据 和 疫病 传播 


世界 各 国 长 期 以 来 都 在 记录 哪些 人 患 了 哪些 疾病 。 国 家 数据 库 记 录 
这 些 数据 已 经 有 数 十 年 的 历史 了 ， 比 如 在 英格兰 和 威尔士 ， 从 1948 年 开 
始 到 现在 都 有 关于 麻疹 传染 的 双 周 记录 数据 。 这 些 历史 数据 库 对 于 数学 
家 和 流行 病 学 家 来 说 很 有 吸引 力 ， 因 为 它们 可 以 用 于 创建 疾病 传播 的 数 
学 模型 ， 利 用 数据 库 可 以 识别 疾病 的 起 源 并 量化 它 的 移动 。 数 学 家 将 这 
些 可 以 描述 任意 一 种 在 茶 个 系统 内 的 传播 模式 的 已 有 传播 模型 ， 与 历史 
数据 模式 相 比较 。 通 过 校准 模型 中 的 参数 ， 他 们 试图 找到 一 个 可 以 复制 
这 些 数据 的 模型 ， 其 目的 是 找到 一 个 最 匹配 的 模型 以 用 于 预测 未 来 疾病 


的 传播 。 


这 些 模型 通常 包含 一 个 描述 人 口 流 动 的 参数 ， 该 参数 是 确定 传染 性 
疾病 传播 方式 的 一 个 重要 因 系 。 历 史上 曾经 通过 假设 人 们 随机 移动 的 方 
式 来 预测 人 类 的 流动 性 ， 还 曾 通过 相当 粗略 的 调研 来 预 估 ， 即 询问 成 数 
百 至 数 千 人 的 小 样本 人 和 群 在 过 去 一 周 、 一 个 月 或 一 年 中 他 们 都 是 怎么 移 
动 的 。 但 这 种 类 型 的 调研 有 许多 先天 缺陷 : 不 准确 《依靠 人 们 错误 的 记 
忆 ) 、 样 本 偏 少 ( 每 次 只 能 调研 一 小 部 分 人 〉 且 时 效 性 有 限 〈 传 统 调研 
并 不 是 持续 进行 的 ) 。 


然而 ， 在 21 世 纪 早 期 ， 流 行 病 学 家 和 数学 家 意识 到 ， 他 们 可 以 挖掘 
出 能 够 更 能 代表 人 类 在 国家 内 或 区 域内 的 移动 性 的 数据 。 前 一 革 中 讨论 
过 的 航空 和 海运 线路 ， 部 可 以 用 于 了 解 人 们 和 货物 (两 者 都 可 能 携带 疾 
病 载体 ) 在 全 世界 移动 的 情况 。 


航空 线路 提供 了 一 个 展示 城市 之 间 连 接 方 式 的 租 入 式 网 络 。 使 用 往 
来 机 场 的 人 流 数 据 ， 流 行 病 学 家 可 以 在 全 球 疾病 传播 模型 中 增加 一 个 信 
恩 层 ， 这 在 简单 地 通过 稀少 的 数据 来 假设 人口 移动 性 的 时 期 是 不 可 能 
的 。 


2006 年 ， 维 多 利 亚 : 科 利 扎 和 她 的 同事 证 明 了， 航空 运输 网 络 在 严 
重 急 性 呼吸 综合 征 等 新 发 传染 性 疾病 的 全 球 传播 中 扮演 了 重要 角色 。 研 
完 人 员 甚 至 提供 了 一 个 基于 航线 网 络 的 模型 ， 他 们 宣称 这 一 模型 可 以 预 
测 新 及 传染 疾病 的 上 暴发。 尽管 他 们 也 承认 ， 使 用 季 市 变化 以 及 区 域 卫生 
状况 和 卫生 设施 差 卉 等 其 他 要 素 ， 可 以 让 模型 更 精确 。 


但 并 非 所 有 的 航空 和 海运 线路 在 全 球 疾病 传播 中 都 有 相同 的 重要 
性 。 实 际 上 ， 在 描述 疾病 传播 的 过 程 中 ， 只 有 相当 小 的 一 部 分 城市 间 的 
航空 线路 会 被 使 用 到 。 格 奥 尔 基 : 波 巴 谢 夫 、 罗 伯 特 :J- 莫 里 斯 和 DD: 迈 元 
尔 : 戈 德 殉 认为 ， 在 3 000 个 城市 中 选取 200~300 个 之 间 的 样本 ， 束 可 以 获 
得 关于 疾病 传播 的 足够 信息 。 


对 有 些 全 球 性 的 疾病 来 说 ， 如 通过 蚊子 或 其 他 害虫 传播 的 疾病 ， 可 
以 在 航空 乘客 路 线 之 外 加 入 全 球 海运 路 线 来 衡量 移动 性 从 而 更 好 地 建 
模 ， 因 为 大 型 货船 运输 的 货物 很 容易 成 为 昆虫 搭乘 的 便 车 。 比 如 ， 凑 疾 
是 通过 不 同 种 类 的 蚊子 传播 ， 冈 比 亚 按 蚊 是 传染 症 疾 的 一 种 主要 物种 ， 
20 世 纪 30 年 代 它 们 从 非洲 传 到 巴西 就是 一 个 典型 的 主要 通过 海运 路 线 传 
播 的 案例 。 近 年 来 ， 海 运 集装箱 把 亚洲 虎 蚊 ， 又 叫 白 纹 伊 蚊 引 进 到 了 新 
的 区 域 ， 这 种 蚊子 是 登革热 、 黄 热 病 和 西 尼 罗 热 的 重要 载体 。 更 好 地 了 
解 蚊子 或 者 其 他 通过 海洋 运输 的 疾病 载体 在 全 球 的 移动 ， 可 以 帮助 港口 
城市 采取 预防 措施 来 防范 害虫 传播 的 疾病 。 


疾病 预测 


尽管 航空 和 海洋 数据 可 以 改善 模型 ， 最 有 效 的 调整 这 些 模型 的 方法 
还 是 关注 人 类 的 移动 行为 本 里， 而 不 仅仅 是 这 些 数据 表现 。 关 于 人 们 如 
何 移动 的 精细 信息 ， 可 以 通过 CDRs 数 据 来 采集 〈 像 第 七 章 中 提 到 的 那 
FE) 。 从 CDRs 数 据 中 获得 的 移动 性 信息 可 以 反馈 到 流行 病 学 模型 中 ， 
以 更 准确 地 了 解 移动 情况 ， 因 为 在 全 球 模型 中 不 同 区 域 的 移动 情况 是 有 
差异 的 。 


根据 GSMA 无 线 情报 机 构 的 研究 ， 到 2012 年 年 末 全 球 有 32 亿 人 每 人 
拥有 至 少 一 部 手机 ， 而 到 2017 年 这 一 数据 将 会 达到 40 亿 【〈 然 而， 这 些 数 
据 仍 然 远 远 少 于 真实 的 活跃 手机 数量 ， 因 为 有 些 人 有 不 止 一 部 手机 ， 
2012 年 年 末 的 活跃 手机 数量 大 约 是 60 亿 部 ) 。 这 些 活 跃 的 手机 产生 了 拍 
字 节 级 别 的 数据 ， 在 全 球 每 个 国家 高 效 地 留 下 了 人 们 的 位 置 和 交流 的 数 
字 躁 迹 ， 而 且 这 些 数 据 可 以 近乎 实时 地 被 获取 到 。 


CDRs 的 历史 数据 对 人 类 的 流动 性 提供 了 实证 的 、 精 细 的 观察 ， 可 
以 用 于 改善 模型 ， 就 像 航 空 和 海运 数据 一 样 。CDRs 数 据 包含 了 移动 状 
况 的 季节 性 差异 和 区 域 性 差异 。 尽 管 多 数 流行 病 模 型 假设 了 更 加 静态 和 


粗放 的 条 件 ， 但 采用 了 CDRs 数 据 的 模型 可 以 更 容易 适应 不 同 的 时 间 和 
区 域 。 


但 重要 的 是 ，CDRs 数 据 本 号 也 可 以 作为 疾病 骏 发 的 一 种 新 的 指 
标 ， 一 个 可 以 实时 更 新 的 指标 。 为 了 证 明 这 一 观点 ， 马 区 ' 利 普 斯 奇 和 
他 的 同事 在 2010 年 甲 型 HIN1 流 感 暴 发 时 期 ， 在 墨西哥 部 车 了 一 个 面 癌 
100 万 手机 用 户 的 移动 平台 。 与 第 九 章 中 提 到 的 Jana 公 司 案例 类 似 ， 该 
平台 让 用 户 参 与 关于 他 们 当前 健康 状况 的 调研 以 换取 一 定量 的 通话 时 
间 。 当 调研 结果 和 通过 CDRs 数 据 获取 的 被 动 信息 结合 在 一 起 的 时 候 ， 
可 以 发 现 手 机 用 户 的 移动 和 交流 模式 的 变化 与 疾病 的 暴发 呈现 可 能 的 相 
天 性 ; 


传统 的 流感 区 域 预警 系统 最 少 也 有 几 天 乃至 儿 周 的 延迟 ， 因 为 有 症 
状 的 人 不 会 马上 去 看 医生 ， 当 地 政府 和 医院 也 不 会 马上 把 诊断 案例 更 新 
到 数据 库 中 。 一 个 能 够 自动 挖掘 实时 CDRs 数 据 和 手机 调研 数据 的 工 
具 ， 可 以 改革 传染 性 疾病 监测 机 制 ， 这 对 于 发 达 和 发 展 中 国家 来 说 都 可 
以 实现 。 


新 的 监测 机 制 的 实施 并 不 需要 花费 太 多 。 流 行 病 学 家 和 政府 部 门 可 
以 直接 利用 现 有 的 手机 基础 设施 及 其 采集 的 数据 ， 建 立 一 个 真正 的 预警 
系统 ， 而 不 需要 去 更 新 、 修 改 或 是 扩展 现 有 的 疾病 报告 系统 。 他 们 还 可 
以 挖 据 其 他 数据 来 源 ， 比 如 橙汁 销 量 或 者 火车 站 所 担 摄 到 的 乘客 咳嗽 的 
监控 视频 。 这 一 迅速 发 展 的 领域 被 称 为 "症状 监测 ”， 其 本 质 是 通过 一 系 
列 分 散 的 多 样 数据 来 源 ， 在 早期 阶段 发 现 集 聚 的 疾病 症状 。 政 策 制 定 者 
通过 使 用 这 些 数据 的 系统 可 以 建议 可 行 的 早期 行动 ， 比 如 关闭 中 学 和 大 
学 ， 及 时 避 开 疾病 可 能 带 来 的 严重 影 啊 。 


用 数 百 万 人 的 网 页 搜索 预测 感冒 的 活跃 度 


2009 年 ，《 上 自然 》 杂 志 发 表 的 一 篇 论文 揭 开 了 大 数据 的 秘密 。 该 论 
文 由 谷歌 的 研究 人 员 撰写 ， 展 示 了 如 何 利用 数 百 万 人 的 网 页 搜索 数据 ， 
来 推测 一 天 中 流行 性 感冒 在 美国 的 不 同 区 域 的 活跃 度 。 它 说 明 谷 歌 的 搜 
索 词 条 数据 库 除 了 用 于 呈现 受 欢 迎 的 网 页 或 有 关 的 广告 之 外 ， 还 可 以 发 
挥 更 大 的 作用 。 舍 歌 找 到 了 利用 用 户 的 兴趣 来 推断 他 们 的 健康 状况 的 高 
效 方法 ， 并 将 该 方法 运用 到 了 设计 谷歌 流感 退 踪 系统 这 一 免费 工具 。 


谷歌 流感 妃 踪 系统 是 在 数 干 亿 条 美国 搜索 数据 的 基础 上 开发 出 来 
的 ， 包 括 2003~2008 年 这 5 年 时 间 的 匿名 谷歌 网 页 搜索 记录 。 但 为 了 找到 
与 追踪 流感 周期 关系 最 密切 的 搜索 词 ， 研 究 人 员 研 究 了 美国 疾病 控制 与 
预防 中 心 的 流感 预防 定点 监控 网 络 的 公共 数据 。 他 们 基于 美国 疾病 控制 
与 预防 中 心 的 公共 数据 建立 了 一 个 流感 活跃 度 模型 ， 然 后 和 他 们 未 经 过 
滤 的 5 ”000 万 条 最 常用 的 搜索 词 条 数据 库 对 比 。 美 国 疾病 控制 与 预防 中 
心 模型 和 搜索 词 条 数据 库 之 间 的 对 比 显 示 ， 在 频率 和 时 间 方 面 而 言 ， 特 
定 的 搜索 词 条 出 现 的 高 峰 和 美国 疾病 控制 与 预防 中 心 数 据 显示 的 流感 活 
跃 性 的 增强 相 一 致 。 通 过 对 比 ， 研 究 人 员 获 得 了 与 美国 疾病 控制 与 预防 
中 心 模型 中 每 年 流感 活跃 性 相符 的 45 个 搜索 词 条 ， 并 将 这 些 词 条 归 入 流 
感 并 发 症 、 感 冒 /流感 药品 、 常 见 流感 症状 以 及 其 他 与 流感 相关 的 大 类 
中 。 


这 个 验证 搜索 词 与 流感 活跃 性 相关 的 方法 ， 被 重复 用 于 至 少 28 个 国 
家 以 及 美国 的 全 部 50 个 州 。 不 同 国家 流感 活跃 性 的 实证 数据 库 可 以 在 谷 
歌 .org 网 站 上 但 看。 此 外 ， 流 感 退 踪 数 据 可 以 生成 随时 间 变 化 的 活跃 度 
图 表 ， 也 可 以 以 文本 文件 格式 下 载 。 


在 一 个 称 为 登革热 追踪 系统 (Dengue Tracker) 的 工具 中 ， 谷 歌 把 
确定 流感 活跃 度 的 方法 扩展 到 了 登 音 热 的 研究 上 ， 并 在 包括 玻利维亚 、 
巴西 、 印 度 、 印 度 尼 西亚 和 新 加 坡 在 内 的 至 少 十 个 国家 应 用 。2011 年 的 
一 篇 论文 中 介绍 了 研究 人 员 开 发 该 工具 的 方法 ， 并 提 到 这 个 工具 可 能 具 
备 特别 大 的 用 途 ， 因 为 登革热 肾 发 的 国家 大 多 缺乏 传统 疾病 监控 资源 。 


但 它 的 算法 并 不 是 完美 的 ， 而 是 其 他 大 数据 模型 一 样 ， 仅 仅 基于 搜 
索 词 的 模型 需要 核查 。 谷 歌 的 数据 认为 2013 年 1 月 在 流感 季 暴 发 的 时 候 
有 1196 的 人 口感 染 了 流感 ， 但 这 一 预测 数据 几乎 是 美国 疾病 控制 与 预防 
中 心 所 监测 到 的 6% 的 两 倍 。 一 些 研究 人 员 猜 想 ， 这 个 差异 可 以 用 流感 
季 大 量 的 新 闻 报道 引发 了 社交 媒体 上 的 大 讨论 来 解释 ， 但 究竟 是 什么 办 
素 仍然 不 清楚 。 这 表明 了 对 于 模型 来 说 ， 如 果 采 用 了 一 定量 的 搜索 信 

息 ， 那 么 最 好 也 能 包含 一 些 实证 数据 的 现实 核查 ， 我 们 将 在 下 一 节 中 继 
续 讨论 这 一 点 。 


流行 病 网 络 


推 竺 和 脸谱 网 可 能 是 世界 上 拥有 最 明确 、 节 详细 的 个 人 信息 的 两 个 
在 线 服 务 商 。 人 们 所 公开 的 关于 自己 的 信息 总 量 是 令 人 难以 置信 的 ， 从 
工作 、 位 置 、 政 治 立 场 乃 至 状态 更 新 中 透露 的 个 人 观点 无 所 不 有 。 迄 今 
为 止 ， 很 少 有 研究 人 员 可 以 从 脸谱 网 数据 中 挖掘 全 球 公共 健康 的 线索 。 
相反 ， 近 年 来 很 多 研究 人 员 已 经 开始 利用 相对 比较 好 获取 的 推 特 数 据 。 
他 们 的 初期 成 果 展 示 了 利用 社交 数据 建立 综合 可 靠 的 公共 卫生 系统 的 光 
明示 来 。 


2010 年 ， 瓦 西里 欧 斯 :主流 斯 和 内 罗 : 克 里 斯 带 安 尼 尼 扩展 了 谷歌 研 
究 人 员 的 工作 ， 他 们 通过 挖掘 英国 550 万 活跃 推 特 用 户 每 天 发 布 的 数 十 
万 条 推 文 ， 来 寻找 流感 的 相关 指标 。 和 谷歌 研究 人 员 用 来 寻找 与 区 域内 
流感 发 生 率 相关 的 搜索 词 的 方法 相似 ， 主 波斯 和 克 里 斯 带 安 尼 尼 比较 了 
2009 年 6~12 月 间 瑞 国 已 有 的 流感 相关 数据 。 研 究 人 员 友 现 ， 特 定 的 含有 
流感 指标 的 推 文 ， 与 英国 健康 保护 局 2009 年 甲 型 HIN1 流 感 暴发 期 间 数 
据 的 相关 性 超过 959%。 基 于 推 竺 的 流感 退 踪 系统 是 对 谷歌 研究 方法 的 一 
个 独立 验证 ， 并 且 提 供 了 改善 单一 使 用 搜索 词 的 可 能 。 尽 管 在 线 搜索 和 
推 文 都 可 能 会 被 媒体 的 大 肆 宣 扬 和 讨论 所 影响 ， 但 人 们 在 推 特 环 境 下 可 
能 会 提供 更 明确 的 背景 信息 ， 比 如 发 表 类 似 “ 我 感冒 了 ”的 推 文 。 如 末 目 


动 系统 检测 到 这 类 推 文 ， 束 可 以 用 于 推测 该 情形 在 普通 入 群 中 的 规模 ， 
这 与 第 九 革 中 提 到 的 手机 调研 的 方法 类 似 。 


其 他 研究 人 员 ， 包 括 欧 牧 英 治 和 他 的 同事 ， 以 及 蔷 西 娅 : 周 还 有 巩 
特 尔 . 埃 森 巴赫 ， 也 用 不 同 的 方法 分 析 了 推 文 。 死 牧 开 发 了 自然 语言 过 
涯 霹 来 区 分 有 关 流 感 的 讨论 和 表明 一 个 人 生病 的 推 文 。 周 和 埃 和 森 巴赫 天 
注 了 三 种 方法 : 监控 诸如 HIN1 这 样 的 术语 词汇 ， 使 用 内 容 分 析 来 确定 
推 文 的 含义 《比如 判断 是 分 享 新 闻 还 是 目 我 诊断 ) ， 以 及 验证 推 竺 作为 
实时 追踪 工具 的 效果 。 


另 一 些 研 究 人 员 将 推 竺 看 作 一 个 全 球 层面 更 综合 的 公共 健康 数据 来 
源 。 迈 克 尔 :本 保罗 和 号 元 : 德 雷 洋 开 发 了 一 个 主题 模型 ， 是 特别 为 寻找 
描述 症状 和 不 同和 常见 疾病 的 治疗 方法 的 词汇 而 设计 的 。 常 见 疾病 话题 模 
型 通过 对 包含 疾病 讨论 的 160 万 条 推广 进行 学 习 ， 已 经 可 以 提取 从 流 
感 、 传 染病 到 受伤 、 政 齿 问 题 、 一 般 疼 痛 等 状况 的 信息 。 研 究 人 员 宣 
称 ， 该 模型 与 谷歌 退 踪 系统 的 早期 奶 踪 结果 以 及 其 他 建立 在 政府 健康 数 
据 库 基础 上 的 推 特 模型 相符 。 


推送 数据 挖 握 展 示 了 一 种 采集 公共 健康 观点 的 可 能 的 新 方法 ， 从 茶 
种 意义 来 说 ， 就 是 监听 公众 对 于 健康 的 讨论 ， 而 不 是 直接 询问 人 们 的 看 
法 。 尽 管 如 此 ， 在 一 个 社会 健康 监控 系统 完善 之 前 ， 还 需要 做 很 多 工作 
来 验证 来 自 大 家 的 观点 ， 也 许 需 要 跟 手 机 调研 结合 起 来 。 


作为 一 个 全 球 社 区 ， 我 们 处 在 公共 健康 新 时 代 的 突破 点 上 。 长 久 以 
来 ， 人 类 都 受到 传染 性 疾病 的 困扰 ， 但 随 独 医学 的 发 展 以 及 科学 家 对 疾 
病原 因 的 研究 进展 ， 很 多 生命 得 到 拯救 ， 人 类 承受 的 病痛 也 被 缓解 。 然 
而 ， 尺 管 现代 科学 家 开始 了 解 疾病 的 来 源 ， 但 他 们 并 不 能 一 直 清 楚 地 竺 
握 疾 病 在 人 群 中 的 传 揪 途径， 也 不 能 肯定 地 预测 疾病 传播 的 精确 路 径 。 


如 今 ， 科 学 家 终于 看 到 了 终极 的 预防 性 工具 到 来 的 旱 光 一 一 大 数 
据 。 大 数据 和 现实 挖掘 有 可 能 可 以 创造 一 个 实时 “水 晶 球 ”， 可 以 及 时 将 


新 型 流感 病毒 或 者 霍乱 发 病 率 的 突然 上 升 这 类 紧急 疾病 动态 信息 ， 及 时 
通知 医疗 服务 人 员 、 公 共 政 策 制定 者 和 其 他 人 。 


第 五 部 分 重点 提 到 了 一 些 可 以 为 这 个 “水 晶 球 ”添砖加瓦 的 数据 来 
源 ， 从 出 行 网 络 和 搜索 引擎 检索 词 到 手机 调研 和 动态 推 文 ， 同 时 还 着 重 
介绍 了 一 些 使 用 这 些 数据 的 项 目 。 随 着 时 间 的 推移 ， 急 性 流行 病 的 最 佳 
预警 系统 可 能 会 是 建立 在 许多 数据 来 源 的 组 合 上 的 ， 并 且 这 些 数据 可 以 
回溯 到 个 人 以 进行 现实 核查 《通过 移动 设备 调研 或 通过 能 核实 的 推 
文 ) 。 同 时 ， 我 们 还 需要 更 多 的 工作 ， 来 找到 通过 社区 网 络 、 搜 索 词 条 
以 及 手机 数据 推 产 关于 慢性 疾病 的 最 佳 方法 。 我 们 也 需要 更 好 地 了 解 我 
们 的 数据 怎样 才能 和 慢性 疾病 联系 起 来 ， 比 如 糖尿 病 、 免 疫 系 统 素 乱 以 
及 心脏 疾病 。 正 如 流感 数据 在 谷歌 工程 师 的 眼皮 下 被 埋藏 了 将 近 十 年 的 
时 间 ， 慢 性 疾病 的 相关 数据 也 可 能 就 近 在 眼前 ， 它 们 只 是 需要 从 噪声 里 
被 盘 选 出 来 。 


+. 
人 


在 本 书 的 写作 过 程 中 ， 我 们 决定 尽 可 能 多 地 关注 那些 进行 现实 挖掘 
的 初创 企业 或 知名 公司 。 尽 管 也 有 很 多 有 趣 的 学 术 论 文 ， 但 是 它们 往往 
关注 一 些 短期 研究 项 目 ， 这 些 项 目 不 一 定 能 生产 有 深远 影响 的 计划 ， 或 
是 只 能 生产 难以 验证 的 一 次 性 成 果 。 当 然 ， 这 些 公司 可 能 会 县 花 一 现 、 
被 兼并 或 是 消失 ， 但 我 们 相信 ， 分 享 已 有 的 这 些 现实 挖掘 案例 ， 可 以 更 
好 地 在 实践 领域 夯实 大 数据 应 用 的 基础 。 


也 就 是 说 ， 我 们 在 编辑 过 程 中 ， 逐 渐 删 掉 了 本 书 初稿 中 提 到 的 一 些 
公司 ， 因 为 它们 已 经 不 存在 了 。 并 且 ， 在 本 书 付 样 出 版 的 时 候 ， 还 会 有 
一 些 公 司 可 能 在 未 来 3~5 年 中 消失 。 大 数据 的 世界 在 飞快 地 运转 ， 而 这 
些 日 新 月 异 的 初创 企业 正 是 这 一 速度 的 明证 。 


但 是 ， 我 们 也 认为 学 术 论 文 在 大 数据 领域 占有 重要 的 一 席 之 地 。 毕 
竟 “ 现 实 挖掘 ?这 一 术语 就 是 在 肪 省 理工 学 院 的 一 篇 研究 论文 中 首先 提出 
的 。 本 书 中 引用 的 论文 只 是 探索 了 大 数据 应 用 的 一 些 基本 的 可 能 性 。 而 
真实 的 情况 是 ， 为 了 实现 海量 数据 的 全 部 潜力 ， 并 给 入 类 系统 提供 周到 
而 续 密 的 应 用 程序 ， 软 件 工程 师 们 需要 面 对 和 处 理 的 数据 量 十 分 巨大 ， 
无 论 是 范围 层面 还 是 时 间 规 模 ， 痢 是 学 术 研究 中 几乎 不 太 可 能 实现 的 。 


此 外 ， 作 为 一 本 大 数据 挖掘 指南 ， 本 书 的 核心 是 号召 所 有 人 行动 起 
来 。 如 果 你 是 企业 家 ， 请 想 想 通过 现实 挖掘 可 以 为 你 、 你 的 邻居 和 世界 
提供 些 什 么 ; 如果 你 映 处 政府 部 门 ， 请 思考 如 何 利用 数据 来 制定 更 好 的 
BUR; 如 果 你 是 科研 工作 者 ， 可 以 考虑 如 何 将 研究 项 目 推广 到 更 加 广泛 
和 长 期 的 应 用 领域 。 而 在 所 有 这 些 行动 中 ， 都 应 注重 隐私 问题 以 及 它 在 
不 同 范围 层面 和 不 同 社会 背景 下 的 转弯。 在 设计 解决 方案 的 初始 阶段 束 


应 该 考虑 隐私 问题 ， 数 据 的 采集 和 使 用 过 程 也 应 该 保持 透明 。 


现实 挖掘 可 以 从 那些 失效 的 系统 开始 着 手 ， 如 慢性 疾病 管理 混乱 、 
社区 豆 败 、 组 织 见 余 、 公 路 堵塞 、 经 济 桶 退 以 及 全 球 性 传染 病 等 。 


接 下 来 ， 考 虑 与 这 些 系统 失效 有 关 的 或 可 以 作为 指标 的 数据 类 型 : 
生理 行为 的 变化 、 街 头 涂鸦 的 增多 、 生 产 效率 的 下 降 、 汽 车 移动 速度 变 
慢 、 购 物 习 惯 的 转变 、 和 人们 的 旅行 模式 等 。 本 书 提供 了 多 个 相关 数据 集 
的 一 些 指标 ， 但 必须 承认 样本 有 限 。 数 据 无 处 不 在 ， 使 用 它们 只 是 接触 
数据 的 一 种 方式 而 已 。 


还 需要 考虑 在 不 同 层面 采集 数据 一 一 个 人 、 社 区 和 组 织 、 城 市 、 国 
家 以 及 全 球 层面 。 这 些 层面 上 分 别 有 什 么 样 的 隐私 性 问题 需要 考虑 ? 有 
些 什么 样 的 数据 分 孚 激励 措施 ? 透明 度 在 何 时 何 处 最 能 发 挥 作用 ? 哪些 
人 可 以 从 你 的 数据 中 获 荔 ?为 什么 ? 


最 后 ， 除 了 从 数据 中 获取 信息 外 ， 人 们 还 应 思考 如 何 通 过 数据 让 城 
市 系统 运行 得 更 好 更 智慧 。 如 何 设计 一 个 帮助 糖 原 病 病 人 更 好 地 监测 目 
喘 状 况 的 手机 应 用 ? 如 何 帮 助 市 民 参 与 振兴 衰败 的 社区 ? 如 何 让 脑力 丈 
动 者 更 方便 地 分 享 信息 ? 当 轨 驶 者 有 需求 的 时 候 ， 怎 样 预测 交通 并 将 预 
计 的 路 程 时 间 和 备 选 路 线 等 信息 发 送 给 轨 驶 者 ? 如 何 根据 消费 者 的 特定 
消费 模式 预见 到 国家 的 经 济 衰 退 ? 如 何 帮 助 政 府 更 高 效 地 配置 经 济 激励 
资金 ? 如 何 根据 人 员 移 动 抑制 下 一 轮 大 规模 流行 病 的 暴发 ? 


然而 ， 如 果 认 为 我 们 持续 产生 的 这 些 大 数据 只 会 被 用 于 推动 世界 进 
步 ， 那 就 太 天 真 了 。 近 期 的 一 些 事件 显示 ， 政 府 在 获取 大 数据 时 有 可 能 
会 滥用 这 些 数 据 : 监视 居民 、 镇 压 不 同 政 见 者 或 是 妨害 公民 自由 。 此 
外 ， 公 司 和 营销 者 希望 通过 确定 消费 者 的 行为 来 获取 更 大 利润 ， 或 是 推 
送 更 有 和 针对 性 的 广告 ， 或 是 影响 消费 行为 ， 这 对 绝 大 多 数 人 来 说 也 不 会 
征 进步 。 关 于 这 些 大 数据 使 用 不 当 的 麻烦 后 末 ， 我 们 留待 其 他 地 方 再 做 
深入 讨论 。 


但 是 ， 如 果 因 为 大 数据 可 能 被 用 于 不 道德 应 用 束 停 止 数 据 采 集 ， 那 
也 是 幼稚 的 。 这 就 是 为 什么 我 们 给 工程 师 、 企 业 家 、 学 者 和 政策 制定 者 
提供 了 男 一 条 路 径 : 利用 数据 来 推动 积极 的 变化 ， 并 在 使 用 数据 的 整个 
过 程 中 立足 现状 并 考虑 处 理 个 人 数据 时 的 道德 约束 。 


我 们 希望 本 书 对 大 数据 的 积极 潜力 进行 了 基本 阐述 ， 也 希望 通过 此 
书 让 大 家 了 数据 挖掘 方法 的 应 用 、 系 统 和 概念 。 大 数据 的 时 代 就 在 眼 
前 ， 让 我 们 一 起 来 建造 一 个 更 美好 的 世界 吧 ! 


